Klonování záloh mezi lokalitami - RSYNC?

[CPU]

Ahoj,

Chci klonovat zálohy z jedné lokality do druhé po ne úplně dokonalé 100 Mbps lince.

Nejdřív jsem přemýšlel, že bych druhou lokalitu připojil přes iSCSI, protože to je symetrická linka (100/100).
Ale když to připojím přes iSCSI a druhá lokalita nebude dostupná (stává se), objeví se mi velká spousta ošklivých chyb.

Takže jak to řešit?
"Sprostě" pomocí RSYNCU?
Jde o vytvoření prostých klonů záloh a linka může v průběhu kopírování vypadnout, iSCSI nemá rádo nespolehlivé linky, kdežto RSYNC si počká a zase se z toho vzpamatuje. Tak si říkám, že to bude asi lepší než iSCSI.

Chci něco spolehlivého a pokud možno bezúdržbového, aby se na to nemuselo (často) sahat.

BTW, mirror byste dělali přes LVM (chtěl jsem použít) nebo MDRAID (používal jsem před 10ti lety)?

[Reklama]

[3ugeene]

ja bych jel na prasaka rsync, k tomuhle snad slouzi


a LVM nebo MDADM? LVM jsem nikde zatim nepouzil, ale oboje by melo slouzit k tomu, co ocekavas. Takze asi tak

[CPU]

jel na prasaka rsync, k tomuhle snad slouzi
...
oboje by melo slouzit k tomu, co ocekavas

Já si to taky myslím, ale nedělám to každý den, tak se ptám.

[3ugeene]

no ja to pisu s tim, ze taky ocekavam komentare ostatnich. Ale ja odjakziva na toto pouzivam rsync a na pole odjakziva mdadm. Treba to je v roce 2022 blbost :X


Jinak kdybych to stavel od zacatku, tak to postavim asi na nejakym ZFS a pouzivam zfs send/receive.

[CPU]

postavim asi na nejakym ZFS a pouzivam zfs send/receive.

To by vůbec nebylo špatný, ale protistrana jsou Widle. Jinak by to bylo samozřejmě skvělé.

[Reklama]

[3ugeene]

jo, no tak to ne, no :/

[Jakub Štech]

Já na tohle mám syncthing. Dělá to "opportunistickou" synchronizaci, lze omezit směr ("write-only"), je to atomické (soubor je buď plně přenesen, nebo tam vůbec není), funguje i na androidu, windows.

Na počítačích se automaticky dělají snapshoty, mezi nimi delty (btrfs send | zstd | openssl > soubor), a syncthing to eventuelně dopraví na NAS. Tam to párkrát za den kontroluje script, který soubory přesouvá mimo sdílený dir, čímž se zpětně uvolňuje místo na počítačích. Takhle mi to funguje od 2016 a pokaždé, když přidávám nový laptop si musím dohledat, jak se to dělá :-) protože na to v mezičase nemusím sahat.

[3ugeene]

na syncthing se taky musim podivat, uz to tu parkrat padlo se spokojenosti

[Sat1]

Na zálohování záloh používám skoro všude rsync. Nemá problém na wfi spojích, ani na lokalitách spojených internetem přes lokální wifi ISP. Navíc to je celkem univerzální nástroj, který podporuje i obyčejné Synology.

[Jakub Štech]

Syncthing je taky univerzální nástroj, a taky je populární na Synology NASech :-) a navíc umí synchronizovat i když na sebe počítače "nevidí" (používají se veřejné relay servery), např. mezi laptopem někde za domácím NATem a mobilem v LTE síti na druhém konci světa.

Když synchronizujete víc strojů (např. svoje dotfiles/home dir mezi desktopy a laptopy), tak ani nemusí být všechny počítače online ve stejnou dobu - změny se postupně napropagují z jednoho na druhý.

[Michal Šiman]

Syncthing jak uz tu padlo. Zkousel jsem leta ruzne nastroje. A opravdu Syncthing je nejlepsi / neuniverzalnejsi (pro me).