Zálohování mnoha souborů

[karel]

Dobrý den,

potřeboval bych pravidelně zálohovat několik serverů po síťi na jeden server. Problém je v tom, že data na serverech jsou velmi rozsáhlá, spoustu malých souborů..... Nemá někdo zkušenosti s takovýmto zálohováním??? Jedná se o stovky TB. Potřebuji je komprimovat a to vše velmi rychle. Děkuji všem, kteří odepíší.

[Reklama]

[and]

rsync

[karel]

To znám, chce to něco jiného, rychlejšího a spolehlivějšího....

[anonym]

nejlepe snapshot filesystemu a jeho poslani
snapshot + rsync pokud filesystem neumi posilat snapshoty
jen rsync pokud filesytem neumi snapshoty (nebo ho to zpomaluje natolik ze prestava byt pouzitelny)

kompresi (a mozna dedup) bych resil na tom zalohovacim serveru, idealne nejak transparentne (treba pres nejaky chytry FS)

PS: pokud je to opravdu hodne souboru (treba i malo zmen) tak je potreba pocitat s tim ze rsync ztravi netrivialni dobu kontrolou co se zmenilo, proto je lepsi kdyz se pouzije stejna informace ze snapshotu FS

[to_je_jedno]

prilis malo informaci. ale jinak vse zajimave bylo popsano.

[Reklama]

[Ivan]

To znám, chce to něco jiného, rychlejšího a spolehlivějšího....

A co pouzit nejaky zalohovaci software?

Sorry za flame, ale vzdycky me prekvapi, ze na zalohovani lidi pouzivaji vsechno mozny, jen ne SW ktery je k tomu urceny.

[Withy14]

Stovky TB? To je docela hodně dat, spíše bych to viděl na GB. Každopádně každý software bude relativně pomalý, je nutné počítat s bottleneckem na síti, rychlosti čtení a zápisů u disků. Zkus Baculu (teda předpkládám, že se bavíš o Linuxech, i když Bacula by měla fungovat i pro Windows, teda aspoň klient). Jinak sem narazil na linuxový GlusterFS, což je prý obdoba DFSR z Windows pro Linuxy, ale to nemohu potvrdit ani vyvrátit. Každopádně si myslím, že tohle by mohla být taky alternativa (sice to není přímo zálohování, ale z Windows vím, že DFSR je velmi rychlé a inteligentní), když to například zkombinuješ s jednoduchým mv a gzip/bzip commandem přímo na straně serveru, tak by to taky mohlo tvou situaci vyřešit. Otázkou je, co a jak zálohovat, jestli dělat full, incremental nebo differential. Zkus upřesnit dotaz (včetně OS).

[Ramtech]

csync2 + lsyncd + ešte deduplikácia

https://www.axivo.com/community/threads/lightning-fast-synch-with-csync2-and-lsyncd.121/

V podstate lscyncd sleduje zmeny a csync2 synchronizuje Pozor csync a csync2 sú dva rozdielne programy