Rsync

• Tato varianta je vhodná pro uložení souborů jednoho uživatele, za předpokladu, že není potřeba zachovávat údaje o vlastnictví souborů.
• K úložišti je možno takto přistupovat z různých strojů - např. provést zálohu jednoho systému, ale obnovu souborů udělat na více strojů (s různou vazbou mezi uživ.účty a uživ. identifikátory uid/gid).

Instalace rsync klienta pro příkazový řádek v prostředí Windows/Cygwin
V prostředí GNU/Linux instalace rsync ve většině distribucí dostupná přímo ze správce balíčků.

Příklad použití pro zálohování adresářového stromu folder na účet user serveru host do složky path (rsync formát):

rsync -av ./folder user@host:path

Příklad obnovení adresářového stromu folder z účtu user serveru host do aktuálního adresáře.

rsync -av user@host:path/folder .

Instalace programu Grsync pod Windows

Grafické rozhraní programu Grsync ve Windows:

Grafické rozhraní pod GNU Linux / Xorg:

1. … zde je možno definovat a uložit předdefinované servery.
2. … zdrojové umístění (rsync formát, tj.user@host:path)
3. … cílové umístění (rsync formát)
4. … Pozor: výzva k zadání přístupového hesla serveru nebo SSH klíče se může objevit v příkazovém okně, ze kterého byl program spuštěn, nebo které se spouští automaticky na pozadí.
5. … Při najetí myší nad zaškrtávací volby se zobrazuje nápověda s uvedením příslušného parametru pro řádkový rsync.

• Tato varianta použití služby rsync je vhodná pro uložení synchronizované zálohy souborového systému s údaji o vlastnictví a přístupových právech, kde je třeba tyto údaje u souborů zachovat.
• Např. zálohování souborového serveru, který je využíván více uživateli a při případné obnově souborů ze zálohy musí být nastaveno vlastnictví a přístupová práva shodně jako u originálních souborů.

• v průběhu používání služby nad určitým adresářovým stromem je třeba volat rsync se stále stejným nastavením parametrů --numeric-ids a --fake-super
• množina uživatelů ve zdrojovém systému musí mít neměnné přiřazení číselných identifikátorů účtů (uid/gid).
• k úložišti je třeba přistupovat pouze z jednoho zdrojového systému, nebo z více systémů, které ale mají stejné přiřazení číselných identifikátorů účtů (uid/gid).
• nedoporučujeme použití GUI klienta grsync pod Windows v této variantě - v testech se zde objevilo nesprávné mapování uid/gid uživatelů.

Nedodržením těchto podmínek dojde velmi pravděpodobně k nekonzistenci údajů o vlastnictví souborů. V případě špatných parametrů rsyncu, kdy došlo ke změně skupin na nahraných datech a zárověn se jedná o větší množství dat, neprovádějte prosím nápravu sami, ale napište nám.

--numeric-ids

• při použití tohoto parametru serverový proces nepoužije k mapování uid/gid hodnot uživatelská/skupinová jména, ale použije přímo číselné hodnoty uid/gid ze zdrojového systému.
• hodnoty uid/gid se proto nesmí měnit a je nutné v jednou adresářovém stromu parametr buď používat stále nebo vůbec nepoužívat.

--rsync-path

• tento parametr umožňuje předat parametry serverovému procesu - v této variantě je využíván k předání parametru --fake-super:

  --rsync-path="rsync --fake-super"

--fake-super

• tento parametr zapíná na serverové straně emulaci superuživatelského módu a rsync pak ukládá údaje o vlastnictví a přístupových právech do rozšířených attributů (xattrs)

--super

• tento parametr vynucuje superuživatelské chování - změny vlastníků a práv u souborů. V testech byl potřeba pouze při obnově souborů na klienta pod OS Windows. Pozor: při odesílání souborů na nesuperuživatelský účet nelze tento parametr použít (správná volba je v tomto případě parametr --fake-super v --rsync-path).

Příklad použití pro zálohování adresářového stromu folder na účet user serveru host do složky path:

rsync -av --numeric-ids --rsync-path="rsync --fake-super" ./folder user@host:path

Příklad obnovení adresářového stromu folder z účtu user serveru host do aktuálního adresáře.

rsync -av --numeric-ids --rsync-path="rsync --fake-super" user@host:path/folder .

Příklad zálohování a obnovy adresáře uživatele Adminstrator pod Windows:

rsync -av --numeric-ids --rsync-path="rsync --fake-super" /cygdrive/c/Documents\ and\ Settings/Administrator user@host:path

Při obnově pod Windows může být potřeba dodatečný parametr --super pro správné obnovení informací o vlastnictví souborů a přístupových právech:

rsync -av --numeric-ids --super --rsync-path="rsync --fake-super" user@host:path/ /cygdrive/c/Documents\ and\ Settings/restore

Obecný zápis vzdáleného umístění:

uživatel@server:cesta

kde:

• uživatel … uživatelské jméno účtu, na který v datovém úložišti přistupujeme.
• server … doménové jméno serveru datového úložiště.
• cesta … cesta v souborovém systému datového úložiště relativní vůči domovskému adresáři uživatele.
  

Příklad:

user@ssh.du4.cesnet.cz:VO_storage-tape_tape/zalohy/1205-kveten

Pro kontrolu integrity souborů můžete využít aplikaci hasher, která je popsána v následujícím návodu.

Stránka projektu rsync: http://rsync.samba.org/
Stránka projektu Grsync: http://www.opbyte.it/grsync/
Stránka projektu Grsync pro Windows: http://grsync-win.sourceforge.net/
Stránka projektu Grsync pro MacOS: http://grsync-mac.tuxfamily.org/?lang=en
Článek o rsync: http://www.root.cz/clanky/pokrocile-zalohovani-s-rsync/

Datové úložiště NAS Synology komunikuje standardně přes rsyncd, který z bezpečnostních důvodů nepovolujeme. Přes rsync je nicméně možné provádět zálohování na datová úložiště CESNET z NAS Synology. K tomu je však třeba využít CLI, v GUI toto nelze provést. Níže je pro ukázku dostupný jeden z možných přístupů využívající standardní SSH a rsync, které jsou součástí skriptu volaného cronem.

   
#!/bin/ash

LOG_FILE=/var/log/backup_`date '+%F'`.log
LOG_FILE_ERR=/var/log/backup_errors_`date '+%F'`.log

echo "`date '+%b %d %T'` ==== Start of transmission ====" >> $LOG_FILE

rsync -a --exclude="[#]recycle/" /volume1/backup service_account@ssh.duX.cesnet.cz:~/VO_nazev-tape_tape/ 1>> $LOG_FILE 2>> $LOG_FILE_ERR

RETURN_CODE=`echo $?`
echo "`date '+%b %d %T'`==== End of transmission ====" >> $LOG_FILE

# Back up logs as well
rsync -a /var/log/backup* service_account@ssh.duX.cesnet.cz:~/VO_nazev-tape_tape/