Levné úložiště pro zálohování jednotek TB dat

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #15 kdy: 17. 06. 2025, 16:40:22 »
Osobně mi přijde nejlepší řešení mít to pod kontrolou, stačí nějaké Raspberry Pi třeba u rodičů, tchána, kamaráda, dědy s Wireguardem, který se konektí k tobě domů a na to odlévat, levnější to ani být nemůže protože člověk platí jen elektřinu, Rpi a Disk a má to pod kontrolou a zároveň v jiné lokalitě. Je pak potřeba mít doma veřejnou IPv4 či IPv6.

Já už se cloudu snažím vzdalovat, stejně je to vždy podobné, na začátku udělají levné ceny, a jakmile vyrostou do maxima a zaháčkují si lidi, tak tvrdě zdraží - aneb Vedos v praxi, kde jsou časy výkonného hostingu s podporou za 25 Kč měsíčně, že. Myslím, že jiní poskytovatelé v tomto nebudou jiní. Samozřejmě že data se asi dají přenést, ale jako dřívější přítel cloudu, co jsem tomu věřil, jsem dospěl k závěru, že on-premise má svoje kouzlo.

souhlasim. a kdyz jde jen o zalohu, tak to staci zalohovat na disk, disk nekam schovat a za nejaky cas zase pripojit a zazalohovat.


Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #16 kdy: 17. 06. 2025, 17:36:34 »
Michal Šmucr1
Díky, asi zkusím to Uloz.to jako první. Hetzner je jako storage box zatím možná nejdražší, a že by tam šlo použít rsync to nevypadá. Rclone by mohlo být podobné (zatím zkušenosti nemám), a fungovat by mělo i na uloz.to. Na uloz.to lze úplně ze začátku vyzkoušet zdarma 25 GB (dřív bylo 50 GB) a pak přejít na těch 5 TB. 25 TB bych už sám nevyužil.

Jak vám někdo psal, Hetzner Storage Boxy podporují SCP (obecně SSH), rsync, já je používám s Borgem, dá se na ně připojit přes SSH přímo na shell, zrovna ty podporují kdeco. Proto jsou taky dražší než služby jako iDrive, kde jste typicky hrozně omezený buď nějakou aplikací (kterou vůbec nemáte pod kontrolou takže nepoužitelné) nebo v lepším případě prostě nějakým flat storage a'la rclone a v nejlepším případě Resticem, který má ale pro velké datové objemy taky trochu mouchy.

Obecně tedy záleží co přesně potřebujete. Já osobně trvám na inkrementálních zálohách, které jsou schopny narozdíl od nějakého plochého uložiště nejen deduplikovat roky zpět ale hlavně jsou odolné proti nedetekovatelnému poškození dat. Což se třeba se selhávající RAM nebo i když si člověk prostě jen něco nechtě smaže a nedojde mu to hned stane jedna dvě.
« Poslední změna: 17. 06. 2025, 17:42:11 od Martin Poljak »

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #17 kdy: 17. 06. 2025, 17:39:33 »
Je pak potřeba mít doma veřejnou IPv4 či IPv6.

Ach jo, to je pořád dokola. VPS s veřejnou IP pro výrobu VPN se přece dá pořídit za euro dvě měsíčně. Veřejná IP nutně potřeba není.
« Poslední změna: 17. 06. 2025, 17:43:56 od Martin Poljak »

jjrsk

  • *****
  • 784
    • Zobrazit profil
Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #18 kdy: 17. 06. 2025, 17:55:39 »
Jen bych to neviděl tak, že automaticky data "v řiti" jsou veřejná, riziku úniku dat se dá vcelku dobře předejít tím, že si je před posláním do té veřejné služby zašifruješ, právě proto jsem zmiňoval třeba ten Restic (může to být i třeba Borg Backup nebo nějaké z mnoha komerčních řešení).
Ne, neda. Je to presne exaktne stejny, jako kdybys na ulici hodil trezor a do nej zlaty cihly.

Je jen otazka casu, kdy ti to sifrovani bude prolomeno, at uz hrubnou silou, nebo kvuli nejakymu bugu jak v sifre tak pripadne ve tvy implementaci.

Sifrovani funguje presne stejne jako dvere a na nich zamek. Vykradeni domu/bytu to nijak nezabrani, ale muze to zlodeje pracnosti/casovou narocnosti momentalne odradit.

Ty mu ovsem davas cas zcela neomezeny.

Pokud chces mit data v bezpeci, musis je mit pod kontrolou, vcetne HW na kterym jsou.

---
Navic, vlastni HW je uz strednedobe vyrazne levnejsi. Nikdy nikdo mi nenabidl zadnou storage (a nic vic, zadne dalsi sluzby sem nechtel) za min nez dvojnasobek vlastniho HW. A to se pocitalo na 5 let. Realne ti na maly zalohovani HW prezije vpohode 10-15let.

Vzhledem k popisovanymu objemu dvoudiskova krabicka nekam na chatu/k babi na pudu/...

Kit

  • *****
  • 836
    • Zobrazit profil
    • E-mail
Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #19 kdy: 17. 06. 2025, 18:00:28 »

Díky za tip. Mají docela zajímavé tarify, co máte za variantu a jak to používáte?
Máte iDrive E2 https://www.idrive.com/s3-storage-e2/, co má S3 rozhraní (tzn. je nejspíš rovnou použitelný s Rclone, Resticem), nebo ten levnější, standardní Backup tarif, kde mají nějaký speciální nástroj pro Linux?
https://www.idrive.com/faq_linux_scripts#linux1

Mám tarif Mini (500 GB) a nepoužívám žádné sofistikované nástroje, jen webové rozhraní a aplikaci pro Windows. Vím, že mají nějaký CLI nástroj pro Linux, ale nezkoušel jsem.

Pro Linux je k dispozici konzolový rclone nebo grafická nadstavba Rclone Browser. Také se dá připojit přes FUSE.


Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #20 kdy: 17. 06. 2025, 18:07:29 »

JanBenicek
Desítky TB, to používáš ten 25 TB účet, nebo ještě vyšší ? Řešení uloz.to vypadá nejlíp.

Aktuálně ano, 25TB, ale zbývá málo a budu navyšovat (zbývá cca 2TB místa a to zaplním do dvou-tří měsíců). Volil jsem uložto kvůli jeho ceně. Pro osobní užití jsem chtěl zálohovat co nejlevněji vzhledem k tomu že to je třetí kopie (Hlavní data mám na serveru v DC, první zálohu mám doma na NASce a třetí umístění je uložto)

Jakmile jsem se dostal do stavu (zatím) nízkých desítek TB dat, tak jsem si ty náklady začal hlídat.

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #21 kdy: 17. 06. 2025, 18:13:04 »
Pokud máš dvě lokality s použitelnou konektivitou, tak dlouhodobě levnější je do každé dát nejlevnější dvoudiskovou DiskStation od Synology nebo obdobu od QNAPu nebo Asustoru, a přistupovat k tomu buď VPNkou (pokud nemáš veřejnou stativkou adresu tak v kombinaci s nějakou DDNS, přičemž Synology a Mikrotik (a nejspíš i Asustor a QNAP) provozují vlastní a s jejich zařízením ji máš zadax) nebo přes jejich veřejnou bránu po registraci zařízení k přístupu z internetu (u Synology QuickConnect, u Asustoru EZconnect). Kapacitu si uděláš jakou potřebuješ, a máš to geograficky oddělené. Pokud chceš hodně šetřit, tak klidně oboje jednodiskové a k tomu externí disk, kam se to bude průběžně zálohovat.
Provozní kopii pak máš na svém pecku, dá se nastavit že se to zálohuje nebo synchronizuje při změně nebo ve fixních časech / intervalech, plus každé to zařízení se může vlastní zálohovací službou zálohovat na externí disk.
Výhodou je, že ti ta data neleží nikde ve čmoudu, a bezpečnost se odvíjí hlavně od toho, jak bezpečně si nastavíš přístupy do sítě a do NASů. Plus pokud potřebuješ obnovovat, na místní síti to máš o několik řádů rychlejší, než z cloudu.

Aha, takže se nám to trochu aktualizovalo. Z malých jednotek TB jsou najednou desítky. To je ale poněkud vyšší level, vždyť to "za levno" nejde ani rozumně přenášet mezi lokalitami.
« Poslední změna: 17. 06. 2025, 18:17:30 od Marek Staněk »

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #22 kdy: 17. 06. 2025, 18:30:32 »
Aha, takže se nám to trochu aktualizovalo. Z malých jednotek TB jsou najednou desítky. To je ale poněkud vyšší level, vždyť to "za levno" nejde ani rozumně přenášet mezi lokalitami.

Prosím neplést přispěvatele. APP co vidím nic neměnil na své specifikaci. Já jsem jen dával info o mém řešení většího množství dat.

Jinak jde to levně přenášet, jen si člověk počká, což je taky výhoda. Když by mi nějakou náhodou proběhl serverem ransomware nebo něco podobného tak se to jen rychle nepropíše do záloh v případě že bych byl nějakou dobu mimo a nestihl to začít řešit před synchronizací
« Poslední změna: 17. 06. 2025, 18:33:52 od JanBenicek »

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #23 kdy: 17. 06. 2025, 18:32:47 »
Aha, takže se nám to trochu aktualizovalo. Z malých jednotek TB jsou najednou desítky. To je ale poněkud vyšší level, vždyť to "za levno" nejde ani rozumně přenášet mezi lokalitami.

Prosím neplést přispěvatele. APP co vidím nic neměnil na své specifikaci. Já jsem jen dával info o mém řešení většího množství dat.

Jinak jde to levně přenášet, jen si člověk počká, což je taky výhoda. Když by mi nějakou náhodou proběhl serverem ransomware nebo něco podobného tak se to jen rychle nepropíše do záloh v případě že bych byl nějakou dobu mimo a nestihl to začít řešit před synchronizací

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #24 kdy: 17. 06. 2025, 18:34:43 »
Aha, takže se nám to trochu aktualizovalo. Z malých jednotek TB jsou najednou desítky. To je ale poněkud vyšší level, vždyť to "za levno" nejde ani rozumně přenášet mezi lokalitami.

Prosím neplést přispěvatele. APP co vidím nic neměnil na své specifikaci. Já jsem jen dával info o mém řešení většího množství dat.

Jinak jde to levně přenášet, jen si člověk počká, což je taky výhoda. Když by mi nějakou náhodou proběhl serverem ransomware nebo něco podobného tak se to jen rychle nepropíše do záloh v případě že bych byl nějakou dobu mimo a nestihl to začít řešit před synchronizací

Chybička se vloudila při rychlém klikání a omylem jsem začal citovat sám sebe a nevšiml si toho :)

Kit

  • *****
  • 836
    • Zobrazit profil
    • E-mail
Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #25 kdy: 17. 06. 2025, 18:42:22 »

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #26 kdy: 17. 06. 2025, 18:50:01 »
Z hlediska bezpečnosti to není nejlepší.
Záloha by měla být ideálně geograficky oddělená od provozních dat.
...
Ja sem zvedav, jak takovou zalohu budes 10 let obnovovat ...

To úmyslně špatně radíš ? Záloha na stejném místě je nesmysl
A dalsi odpornik ktery o tom vi prd.

Jakykoli zalohovani predevsim predpoklada analyzu rizik a jejich reseni. Jakykoli data nekde v riti jsou data verejna a verejne dostupna, coz je typicky radove horsi, nez o ta data prijit.

Pokud se bavime o soukromych datech, tak v pripade pozaru/povodne bude mit majitel dost jiny starosti nez par fotek v trapu.

Když už jsi někoho na foru tady označil odporníkem, který o tom ví prd, zajisté jsi myslel sám sebe. Tedy klesnout tak hluboko, abych někomu nadával, to nechci. Ale evidentně sám o tom moc nevíš.

V případě požáru-povodně mohou být data jen malou ástí celkového vlastníctví, ale i tak aspoň něco se podaří zachránit (u dat je ta prevence snadná). V určitých případech ale mohou právě data mít i větší hodnotu, než zbytek majetku. Nehledě na to, že v datech mohou být smlouvy, závěť, diplomy, přístupové údaje. Pokud cestuji a pracuji jako digitální nomád, mám jen batoh s sebou, ta data jsou to nejdůležitější. Prioritou je samozřejmě záchrana životů, ale pokud řeším ostatní, tak předpokládám že tento bod byl již vyřešen.

Data kdekoliv ve firemním úložišti, v cloudu, tam samozřejmě hrozí, že někdo získá k datům přístup. Což může být horší než ztráta dat, Ovšem to se dá řešit šifrováním. Vytvoří se šifrovaný kontejner nebo obraz HDD. A nejsou vidět ani jména souborů-složek. Není pravda, že je otázkou času, kdy šifrování bude prolomeno. Pokud tedy nebudeme uvažovat kvantové počítače. Prolomení šifry i s dnešní veškerou výpočetní silou na světě by trvalo déle než existence vesmíru (složitost roste exponenciálně). Srovnání s tím, že necháme někde na ulici trezor se zlatými cihlami, to neodpovídá realitě.

Nevím, proč by se vzdlená záloha měla stahovat 10 let. Při dnešních rychlostech je to otázka jednoho nebo více dní, pokud tedy někdo nejede na 2G datech.

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #27 kdy: 17. 06. 2025, 19:10:37 »
greenlinuxguru
ogdru6jahad
Nejlepší a nejlevnější by skutečně bylo mít disk (stačí jeden externí) u kamaráda nebo příbuzných a občas tam zajet nahrát data, menší aktualizace se dají zvládnout po síti. Ale takovou možnost nemam, nechci to tu vypisovat ale rodina-příbuzenstvo-známí stojí za nic, není na ně spoleh a stejně ani by nepochopili, o co mi jde. Ne každý má dobré zázemí. Pokud by mi s tím pomohl i někdo tady od tud za rozumě vysokou odměnu, tak bych to také bral.


Marek Staněk
Právě že ta možnost mít někde bezpečně vlastní disk nebo stroj tu není, už kvůli bezpečnosti a i z konektivitou by byl problém. Desítky TB má jiný přispěvatel do dizkuze, který už používá právě ulož.to a ptal jsem se ho na zkušenosti. Já jsem na těch jednotkách TB, nebo jen ta nejdůležitější data by dala vyšší stovky GB. Pokud člověk nespěchá, tak ani na ty desítky TB nepotřebuje pro přenos nic drahého. 100 Mbit/s zvládne přenést něco přes 1 TB denně a to je u serverů běžné, už i 1 Gbit/s je poměrně častý. U přenosu vyšších desítek TB nebo stovek TB bych si naložil disky do kufru a koupil jízdenku na vlak.

To mi připoměnělo jeden astronomický celo-světový projekt, konkrétně Event Horizont Telescope. Tam se při zobrazení černé díry ve středu naší galaxie a M87 zapojily observatoře po celém světě a data se musela synchronizovat. Nevím kolik dat to nakonec bylo, jestli desítky-stovky-tisíce PB (level úplně jinde). Ale disky si vzali vědci do kufru a přepravili letadlem.

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #28 kdy: 17. 06. 2025, 19:15:58 »
Kit
Amazon Glacier vypadá zajímavě, hlavně u záloh na které není potřeba častý přístup (jen párkrát do roka) je to za 1 TB hodně levné. Ale i jednou za rok aktualizace-nahrávání jak bude fungovat nevím (jestli nahrát vše znova nebo jen aktualizovat data). Vzhledem k tomu, že zálohuji občas větší objem dat, je to zajímavé řešení.

Re:Levné úložiště pro zálohování jednotek TB dat
« Odpověď #29 kdy: 17. 06. 2025, 19:38:07 »
U toho Amazon Glacier si spočti kolik skutečně spotřebuješ peněz.
Navenek ty čísla vypadají super, ale záleží na způsobu zálohování atd.
Osobně si myslím, že je to jedno z nejlepších řešení na trhu, ale cena je také adekvátní.

To AWS si můžeš otestovat. Tak nějak reálně otestuj na nějakém vzorku dat. Pošli tam 10GB, pak udělej nějaké změny, znovu tam pošli ty změny atd. Spíše jde o to, zda tam pak budeš mít 10GB+přírustek (tzn. ale i při odmazání).

Jestli to chceš používat jako externí disk tak já používám ExpanDrive.