Fórum Root.cz
Hlavní témata => Server => Téma založeno: jtrmal 31. 01. 2024, 15:05:38
-
Shanim reseni pro hostovani cca 10TB legalnich vyzkumnych dat. Mesicne mame cca 100TB outgoing traffic -- vyzkumna komunita ta data miluje.
Problem je, ze v soucasne dobe hostujeme na DigitalOcean a ucet se blizi cca $2000. Nekdo ma nejake doporuceni?
Fakt je vse legalni a do teto doby jsme to platili z americkeho NSF grantu a ten se blizi k zaveru. Plus jsem ted rezignoval na svoji pozici na univerzite a tak to zatim sudlame, jak se da, ale chtel/musim to v dohledne dobe nejak vyresit.
-
Možno archive.org. Ja tam mám napr. k dnešnému dňu cca 180 GB dát ([1]). Ak tak, na nahrávanie použi CLI ([2]). Nahrávaj po jednom v príkaze. A ak máš veľa súborov, tak mám na to skript [3] (majú nejakú limit frontu).
[1] https://archive.org/details/@du_an_krehe_?and[]=subject%3A%22d0cmf%22
[2] https://archive.org/developers/internetarchive/cli.html
[3] https://codeberg.org/Dusan_Krehel/archive.org_multiuploader
-
Můžeš zkusit distribuovat to přes torrenty a nutit lidi aby dlouho seedovali, ale bude to pro uživatele větší opruz než to stáhnout z nějakého HTTP což asi děláte teď.
Obecně, ta cena mi nepřijde zas _tak_ strašná, jsou lidi co platí v AWS nebo Google Cloudu klidně stonásobek. Osobně bych asi zkusil koupit https://www.hetzner.com/dedicated-rootserver/sx134/ nebo ekvivalent od dalších budgetových server hosterů a doufal, že ti za pár měsíců nenapíšou, že přenášíš moc.
-
Shanim reseni pro hostovani cca 10TB legalnich vyzkumnych dat. Mesicne mame cca 100TB outgoing traffic -- vyzkumna komunita ta data miluje.
jestli jde o projekt spojený s českou akademickou půdou, nezkoušel sis promluvit s CESNETem?
A pokud jde o projekt někde jinde, tak s tamní obdobnou institucí?
Třeba v CZE existuje projekt národní repozitář - https://data.narodni-repozitar.cz ..
<zvědavost>
o jaká data jde?
</zvědavost>
-
jestli jsi z nejake skoly, zkus https://metavo.metacentrum.cz/ treba se s nima domluvis.
nejvetsi storage co jsem odtud na domaci workstationu pripojil /nfs4 && krb5/ melo 5.6PB
-
Jde v zasade o ruzna recova data v ruznych jazycich. Ja je nesbiram, jen poskytuji misto ostatnim tymum/lidem v komunite, kde otevrena data jednoduse vystavit - zacali jsme s tim cca deset let nazpet a celkem je to docela uspesne. Podminkou je nejaka, jakoliv, otevrena license, alespon pro research/non-commercial.
Bohuzel v soucasne dobe nemam oficialni vazby na ceske akademicke prostredi, takze Cesnet a Metacentrum asi (prozatim) padaji.
-
Můžeš zkusit distribuovat to přes torrenty a nutit lidi aby dlouho seedovali, ale bude to pro uživatele větší opruz než to stáhnout z nějakého HTTP což asi děláte teď.
Obecně, ta cena mi nepřijde zas _tak_ strašná, jsou lidi co platí v AWS nebo Google Cloudu klidně stonásobek. Osobně bych asi zkusil koupit https://www.hetzner.com/dedicated-rootserver/sx134/ nebo ekvivalent od dalších budgetových server hosterů a doufal, že ti za pár měsíců nenapíšou, že přenášíš moc.
To souhlasim, ale proste proste financni zdroje nejsou/nebudou. Ten hetzner vypada zajimave -- v USA neco takove neznas/neznate?
-
A co třeba
https://www.cloudflare.com/developer-platform/r2/
-
Možná toto: https://docs.storj.io/dcs/pricing
-
... 10TB legalnich vyzkumnych dat. Mesicne mame cca 100TB outgoing traffic ...
50MB/s ... tzn nejakych 500Mbit, to by i nejaka ta lepsi domaci linka mohla ustat. Zkus strahov, treba ti to odservirujou.
-
To souhlasim, ale proste proste financni zdroje nejsou/nebudou. Ten hetzner vypada zajimave -- v USA neco takove neznas/neznate?
Pisou ze za 10T 120E s DPH i v USA: https://contabo.com/en/object-storage/
Nepisou nic o limitech na traffic.
-
Ja bych se priklanel k torrentu - odstrani se tim zavislost na 1 centralnim uzlu - a pokud je to komunitne zalozeny, tak prece kazdy muze nechat pustenej svuj node. Jako failsafe muzes mit pripravenou VPS s kopii dat, kterou nahodis pokud se komunita rozpadne a nikdo nebude seedovat.
-
Ja bych se priklanel k torrentu...
Pochopil sem z toho ze se ta data prubezne meni, a to torrentem nevyresis, musel bys vsechny primet k tomu, aby si pravidelne data aktualizovali taktez = odnekud si pravidelne stahovali hash/.torrent. A pak bys jeste musel resit, jestli nova verze dat jde nahashovat pres starou nebo ne, a tudiz je treba to znova stahnout komplet.
Stejne tak tim nevyresis provoz, protoze ve skutecnosti tech zajemcu je malo. 10 mesicne, to je nanic. Aby to davalo smysl musel bys jich mit aspon stovky. Samozrejme muzem se bavit o tom, ze zajemcu je vic, ale nechteji vsechna data, jenze to je ve vysledku jeste horsi, protoze seedovat nebude nikdo.
Plus jako bonus narazis na to, ze 3/4 potencielnich zajemcu nema internet. A pasivni torrent je na kulovy.
-
To nejde nějak zapakovat nebo překódovat? I při použití loseless audioformátů se dostaneš na desetinu.
-
oslov někoho, poptej se velkých společností, operátorů. Tohle je paběrkování, není to moc dat. Navaž s někým spolupráci. Vím, že v T-mobilu jsem připravoval kdysi storage na data pro výzkumníky, nevím, jestli tam ještě takovouhle aktivitu mají.
-
Data jsou staticka, vice mene. Ale torrent je na mnoha univerzitach celkem pronasledovan. A spousta lidi proste nema dobrou linku nebo prostor. Akademie je v tomhle docela divna.
Data jsou samozrejme komprimovana. Jen je toho hodne :)
Kouknu na ta dalsi doporuceni -- dekuji vsem za pomoc
Jinak kontaktoval jsem nejakou CDN ktere otevrene deklarovalo ze podporuje opensource a ze projektum nabizi prostor a bandwidth a pry moc dat a moc bandwidth. A kontaktoval jsem ceskou svetovou CDN a vubec mi neodpovedeli zpet. Tak proste nevim. Kdysi mi dal google X desitek tisic dolaru v kreditech do GCP jako podporu projektu, akorat outgress to sezral tak desetkrat rychleji nez u toho DigitalOcean.
-
Kup si domu linku 1000/1000, 4 diskovou Synology NASku a myslim, ze co potrebujes to splni. Bude to levny a data budou dostupny. 1Gbps musi proste vedatorum stacit, kdyz za to nechtej nic platit. Vyreseno.
-
Jasně, ať si koupí domu 1Gbps přípojku, protože ono ji lze zřídit všude, že?
Taky jsem chtěl navrhnout, ať si do dá domů. Jenže když bude někdo tahat, může to snadno domácí linku zahltit a pak nepojede třeba ani IPTV.
Navíc né každý chce/může mít doma datacentrum. To už by mohlo být lepší tu krabici strčit nějam do housingu. O každou škatuli je ale potřeba se starat.
-
Pochopil jsem z toho, ze jde hlavne o penize. Tak se bojim, ze nejaky housing platit chtit nebude, neni to dneska zrovna zadarmo. Zrovna u me v panelaku jsou momentalne 3 operatori s optikou a nabizenym tarifem 1000 obema smery mezi 600 - 1000 korun. Predpokladam, ze to tak je dneska v kazdym panelaku stredne velkym meste.
Myslim si, ze Synology DS923+ to klidne zvladne a tyhle dnesni domaci opticky linky to taky "zvladnou". Dneska uz to operator zkousne. Na nasce si muze oshapovat provoz treba na 800Mbps...
Jestli to nechce mit doma, tak at klidne nema, ale trafic 100TB mesicne proste nikdo gratis transportovat nebude.
Za jednorazove 30k a litr mesicne to asi nema konkurenci.
-
Ono je taky otazka kolik bude mit provider zahranicni konektivitu.. a pokud budete v statistikach vycnivat, a budete mit pridelenou statickou IP, coz asi chcete.. tak neni problem vas penalizovat do zahranici.
-
Zrovna u me v panelaku jsou momentalne 3 operatori s optikou a nabizenym tarifem 1000 obema smery mezi 600 - 1000 korun. Predpokladam, ze to tak je dneska v kazdym panelaku stredne velkym meste.
To, že je něco u vás v paneláku fakt neznamená, že je to tak všude. To jednak. A i kdyby bylo, asi tak dvě třetiny lidí v žádném paneláku opravdu nežijí. A i kdyby žily, v kdejakém paneláku jsou koaxiální rozvody a optika končí někde ve sklepě a poměr download/upload je na těch last mile koaxiálních linkách nastavený tak 25:1 (něco ve smyslu 500 Mbit download, 20 upload typicky), často prostě kvůli tomu, že poskytované modemy vyšší upload nedávají.
Jestli to nechce mit doma, tak at klidne nema, ale trafic 100TB mesicne proste nikdo gratis transportovat nebude.
Contabo má i na nejlevnějších VPS za pět eur měsíčně ingress free a outgress 32 TB (tam je konektivita tuším 250 Mbit). A co by s tím udělal třeba WEDOS s tím jejich gigabitem nevím, žádné limity neuvádí a nikdo si od nich nikdy nestěžoval. Takže úplně grátis ne, ale za pár korun bez problémů ano.
-
Nejake penize vzdycky nejak najdu, ale samozrejme cim min, tim lepe. Nejde o jednorazovy naklad ani, o ten vzdycky nejakou firmu ukecam. Potrebuji najit nejakou udrzitelnou strategii -- granty prichazeji a odchazeji, maji ruzne podminky, co z nich jde platit a co ne, firmy vznikaji a odchazeji a v zavislosti na geograficke lokaci muzou mit pocit, ze ekvivalent $500 si nemuzou dovolit (jeden nas sponzor v Cine). Proste chci, aby ta stranka/site existovala a nebylo to zavisle na tom, jak se kdo kdy vyspi.
-
Nechce sa mi hladat, ci to musi byt mimo EU, mozno si to niekde hore spomenul. Ak nie, tak ..
https://www.hetzner.com/storage/storage-box/
€ 24.75 monthly incl. 19 % VAT
10 TB
Traffic Unlimited
-
Jeste jeden tip na distribucni model - a la balicky - mit primarni lokaci pod vlastni kontrolou, sice s omezenou konektivitou, ale vzdy dostupnou (tj. nejaky levny hosting, s (dynamickym) shaperem aby se to udrzelo v limitech)
A pak si domlouvat lokalni mirrory, ktere prijdou a pojdou, a sve vyzkumniky load-balancovat mezi tyhle mirrory.
Samodomo by tento model fungoval i skrze ty VPS, kdyz vam nejakou vypovi kvuli trafficu, tak vas to nepolozi, jen trocha zabrzdi.
-
Jeste jeden tip na distribucni model - a la balicky - mit primarni lokaci pod vlastni kontrolou, sice s omezenou konektivitou, ale vzdy dostupnou (tj. nejaky levny hosting, s (dynamickym) shaperem aby se to udrzelo v limitech)
A pak si domlouvat lokalni mirrory, ktere prijdou a pojdou, a sve vyzkumniky load-balancovat mezi tyhle mirrory.
Samodomo by tento model fungoval i skrze ty VPS, kdyz vam nejakou vypovi kvuli trafficu, tak vas to nepolozi, jen trocha zabrzdi.
V zasade presne takhle to mame. Mame dva mirrory (zatim). Vsechnu konfiguraci mame na githubu. Chtelo by to docker image, na to dojde, ale pred temi cca 10 lety se na docker nehralo.
Akorat kolega se zdraha prehodit vetsinu trafficu na ty mirrory, protoze se boji, ze to vzdaji (coz se v zasade ted stalo, takze se asi zdraha opravnene). Jenze kvuli tomu vetsinu toho provozu odchytne ten master, coz vede k tomu $2k uctu. Ale zkousim toho Hetznera, v aukci byl sx64 za cca $100 mesicne.
-
Ahoj, ještě můžeš kouknout na https://www.backblaze.com 10TB tam je za 60$/m a download by měl jít udělat zdarma včetně CDN
-
Kup si domu linku 1000/1000, 4 diskovou Synology NASku a myslim, ze co potrebujes to splni. Bude to levny a data budou dostupny. 1Gbps musi proste vedatorum stacit, kdyz za to nechtej nic platit. Vyreseno.
Řešil bych to taky tak. A na ten argument některých, že taková lajna nemusí být dostupná, se dá jenom odpovědět, že kdo hledá, ten najde. Jsou třeba paneláky, ve kterých takové lajny jsou a dá se v nich pronajmout nějaký nebytový prostor za pár kaček (stačí jedna místnost v suterénu nebo třeba bývalá kočárkárna atd.).
-
Kup si domu linku 1000/1000, 4 diskovou Synology NASku a myslim, ze co potrebujes to splni. Bude to levny a data budou dostupny. 1Gbps musi proste vedatorum stacit, kdyz za to nechtej nic platit. Vyreseno.
Řešil bych to taky tak. A na ten argument některých, že taková lajna nemusí být dostupná, se dá jenom odpovědět, že kdo hledá, ten najde. Jsou třeba paneláky, ve kterých takové lajny jsou a dá se v nich pronajmout nějaký nebytový prostor za pár kaček (stačí jedna místnost v suterénu nebo třeba bývalá kočárkárna atd.).
Já bych se bál, že „domácí“ ISP ti za pár měsíců napíše, že takhle si ta „neomezená data“ nepředstavuje.
-
Napsat sice teoreticky může, ale pokud bude provoz vesměs jenom po republice, tak nejspíš nenapíše. Drahá je zahraniční konektivita, ne ta domácí.
-
Napsat sice teoreticky může, ale pokud bude provoz vesměs jenom po republice, tak nejspíš nenapíše. Drahá je zahraniční konektivita, ne ta domácí.
Tazatel je z USA a distribuuje po celém světě.
-
1) dedik server (pokud je to pro výzkum dodám), otázka je jestli to upočítá procesor přeci jenom 1gbit/s over SSL je dost. Tedy 2U, 16TB disky, 1gbit/s linka 6485 bez dane. (Cena vceten serveru) + backup k tomu.
2) cdnko, pokud by jsi napsal nejakej manager a pres nasi cdn to pral ven tak pokud by byl download pres portal kde bude info o te sluzbe tak to dam ciste za cenu prenosu coz muze byt 2000-3500 czk/mes (pro 100tb).
zalezi jak k tomu pristupuji jestli jsou to datasety a nebo je to proste uloziste kam se hrnou data ktera si pak lidi stahuji individualne nebo je to proste nejake uloziste (napr ftp) kam se to sype odvsude
3) pokud sezenes podporu na nejake universite tak k tomu dodam hw co to utahne jako dar, max si koupis za 50 eur bazarovou 10g sitovku.
-
Napsat sice teoreticky může, ale pokud bude provoz vesměs jenom po republice, tak nejspíš nenapíše. Drahá je zahraniční konektivita, ne ta domácí.
Tazatel je z USA a distribuuje po celém světě.
Pak si musí něco najít tam. Nepochybně i v USA existují místa s Gbps lajnou, kde se dá nějaký vlastní server nebo NAS umístit.
-
Před lety jsem zaslechl debaty toho typu, že některé "subjekty připojené k internetu" (AS) měly velký počet drobných domácích klientů = mocný download, ale skoro žádný upload. A naopak existovaly firmy provozující hosting/housing, které měly veliký upload, ale skoro žádný download. A různě se organizačně spolčovaly a "expandovaly služby" a přeprodávaly konektivitu, aby si ten nepoměr up/down vyrovnaly. Těžko říct, zda je v dnešní době nějaký altruista s hejnem drobných retailových sosačů, který má zbytečných pár gigabitů v uploadu (a byl by ochoten se o ně za drobný peníz podělit).
Hm... na suverénní členství v NIXu to asi nebude :-)
-
Problem je, ze v soucasne dobe hostujeme na DigitalOcean a ucet se blizi cca $2000. Nekdo ma nejake doporuceni?
Obecně, ta cena mi nepřijde zas _tak_ strašná, jsou lidi co platí v AWS nebo Google Cloudu klidně stonásobek.
2000 USD pro hostovani 10 TB dat neni moc (0.2 USD resp. 4 Kc za GB) ? Nekdo plati stonasobek (tedy 200k USD, to je 20 dolaru za GB). Samozrejme, ze za hostovani jde o zbytecne vysokou cenu. Urcite se naklady srazi na 100 Eur za 10 TB, to je 0.25 Kc za GB. A pri trose stesti se dostanes na 1000 Kc/10 TB hostovani, to je 0.1 Kc za GB.
Disky nad 10 TB (nebo i 20 TB) se uz daji sehnat za relativne dostupnout cenu (pod 500 Eur), a dneska uz zacina i na vesnicich byt dostupny internet nad 100 Mbit/s. Ale upload byva omezovan na slabsi. I kdyz v Praze se da sehnat az 1 Gbit obema smery. Uzit by se dalo i hostovani u sebe doma. Ale prumerny upload 100 TB znamena prumerna rychlost uploadu okolo 300 Mbit/s a ve spicce to samozrejme bude vic. Rychlost uploadu by musela byt nejmene 500 Mbit/s, nebo radeji 1 Gbit/s. A to neni vsude dostupne. Pro domaci internet davaji operatori neomezena data, ale nevim, jak by se koukali na traffic 100 TB mesicne. Mozna by i kontaktovali policii pro podezreni z neceho.
Pro jeden zdroj (v domacnosti) utahnout takovy upload bu mohl byt problem. Torrent to resi - z centralniho zdroje upload treba 100 Mbit/s a zbytek uz si zdili mezi sebou uzivatele (pokud min. 2 uzivatele stahuji stejna data). Ale torrenty jsou ve verejnych institicich pronasledovane a bannovane z obavy o nelegalni zdileni. Provoz torrentu by mohl jit nejak prez SSL zamaskovat, ale nevim to jiste. Vim, ze na univerzite i na koleji sli po torrentech jako divy (stahovani i sdileni). Torrentu se sitari boji.
Velmi znamy server uloz.to uz funguje jen na ukladani souboru, zdileni uz ani prez odkaz neni mozne. Maji tam ve velmi priznive nabidce online disk 10 TB (5.5 USD/mesic) a 50 TB (13 USD/mesic), ale nejde zdilet (musel by jsi poskytnout pristupove heslo sveho uctu, to radeji ne).
Driv bylo docela levne kimsufi.cz na pomer cena/misto na disku. Ale ted tam davaji uz ssd, ktere jsuou v cene za TB drazsi, nez disky. Dedikovany server za nekolik desitek Eur (do 100 Eur) mesicne s mistem na disku (klasicky HDD) nad 10 TB a pripojkou 1 Gbit/s, to uz by nemel byt takovy problem najit.
Jedna se o rozumny pocet vetsich souboru, nebo velke mnozstvi malych souboru ? Stahuje honde uzivatelu na raz male objemy dat, nebo jen par uzivatelu na raz velke objemy dat. Kdyz by se jednalo o velke mnozstvi malych souboru a velky pocet uzivatelu na raz, stahujici male objemy - pak uz by to HDD taky nemusel stihat.
Storage servery od Hetzner, tam to funguje jak ? Jen jako uloziste - online disk, nebo i jako webserver, plno-hodnotny server ? CPU a RAM nebudou nejvyssi, ale na webserver to neni potreba narozdil od databazi. I kdyz stovky mbit prez sifrovane spojeni nejaky CPU potrebuje, ale dneska by nemel byt problem.
https://www.hetzner.com/storage/storage-box/
Internet pro domacnost i pro server, uvadi poskytovatel casto neomezena data. Ale pocita s tim, ze lidi prilisne mnozstvi dat stejne ani nevyuziji (BFU). Tady by mozna se mohl nekdo podivit. Zejmena v pripade domaciho internetu.
-
Já bych to vyřešil jinak.
Pokud to nikdo nechce platit, tak bych napsal email na příslušné místa s tím, že na hosting těch dat už nejsou peníze a hosting tedy končí od třeba 1. března 2024...
Toto je většinou jediná cesta jak na to nedoplácet a jak zařídit finance. Druhá věc je dát to na github, ale to se zase možná ozve MS :-)
-
$6/TB u Wasabi, Vultr, Backblaze
€2.6/TB u Hetzner a jeho Storage Box
Dropbox €1.33/TB
PS: Za 100€/mes sa da u Hetzneru zobrat 4x16TB server, 250€ 10x16TB alebo 14x16TB za 400€.
-
Ja osobne bych sel do toho dedikovaneho serveru. Uploadovat 100 TB/mesic, to by sice teoreticky podle neomezenych nabidek operatoru u nas v CR slo, ale asi by byl operator prekvapen (sledovanim youtube to nedas), a mozna bych musel podavat vysvetleni na PCR. Zvlaste nekde na vesnici bych se obaval o stabilitu pripojeni, abych nezbrzdil celou obec.
Dedikovany server se urcite da sehnat pod 100 Eur/100 USD/2000 Kc za mesic s pozadovanym mistem a 1 Gbit pripojkou. Pri trose stesti se da dostat i pod 50 Eur/Mesic.
SX servery maji uloziste obrovska, i SX64 mnoho-nasobne prevysuje pozadovane misto. Vyssi servery SX jsou zbytecne vykonne a drahe - stejne tolik mista nevyuzijes.
https://www.hetzner.com/dedicated-rootserver/matrix-sx/
Nizke ceny se daji i tady najit:
https://www.hetzner.com/sb/
Ale problem bude s dostatecnou kapacitou HDD. Vetsinou tam jsou rychla SSD s mensi kapacitou, coz nepotrebujes. Tady to vypada dobre:
https://www.hetzner.com/sb/#drives_size_from=8000&drives_size_to=16000
Ten za 55.7 Eur/mesic (druhy od zhora) vypada zajimave v pomeru cena-vykon. Misto na HDD dokonce celke 24 TB a mensi SSD pro data, na ktera je potrebny rychly pristup:
https://www.hetzner.com/sb/#drives_size_from=12000&drives_size_to=16000
-
$6/TB u Wasabi, Vultr, Backblaze
€2.6/TB u Hetzner a jeho Storage Box
Dropbox €1.33/TB
PS: Za 100€/mes sa da u Hetzneru zobrat 4x16TB server, 250€ 10x16TB alebo 14x16TB za 400€.
Storage u Hetzner mozna bude jen pro ulozeni dat. Zdileni neregistrovanym uzivatelum do sveta nebude fungovat. Podobne jako na Uloz.to 50 TB za 13 Eur/mesic a tedy 0.26 Eur za TB/mesic. A u Dropboxu mozna podobny problem.
Podival bych se tady:
https://www.hetzner.com/sb/#drives_size_from=12000&drives_size_to=16000
32 TB mista za 55.7 Eur, to je 1.74 Eur za TB mesicne. A je to fungujici server.
-
Obecně, ta cena mi nepřijde zas _tak_ strašná, jsou lidi co platí v AWS nebo Google Cloudu klidně stonásobek.
2000 USD pro hostovani 10 TB dat neni moc (0.2 USD resp. 4 Kc za GB) ? Nekdo plati stonasobek (tedy 200k USD, to je 20 dolaru za GB).
Já jsem mluvil spíš o tom trafficu. Cloudy jsou známé tím, že mají úplně absurdní cenu odchozího provozu (egress traffic cost) - například Google má (https://cloud.google.com/network-tiers/pricing) $0.08/GB (=$8k za tazatelovo 100U měsíčně) a AWS podobně (https://www.digitalocean.com/resources/article/aws-egress-costs). To je fakt stonásobek oproti tomu, co dostaneš třeba i u obyčejného českého Forpsi (https://www.forpsicloud.cz/vps.aspx), o Hetzneru nebo OVH nemluvě.
A lidem, co GCP/AWS používají a bavil jsem se s nimi o tom, na tom nepřijde nic zarážejícího, což mě fascinuje ještě víc. <rant>Je to podobné jako důsledky memu Premature Optimization Is the Root of All Evil - jasně, v mnoha případech je to pravda, ale důsledek je, že programátoři úplně ztratili intuitivní představu, jak rychlý může být program na dnešních počítačích, když o to opravdu jde, a na základě toho nedokážou identifikovat úzká místa ani tam, kde už to opravdu vadí</rant>
-
$6/TB u Wasabi, Vultr, Backblaze
€2.6/TB u Hetzner a jeho Storage Box
Dropbox €1.33/TB
PS: Za 100€/mes sa da u Hetzneru zobrat 4x16TB server, 250€ 10x16TB alebo 14x16TB za 400€.
Storage u Hetzner mozna bude jen pro ulozeni dat. Zdileni neregistrovanym uzivatelum do sveta nebude fungovat. Podobne jako na Uloz.to 50 TB za 13 Eur/mesic a tedy 0.26 Eur za TB/mesic. A u Dropboxu mozna podobny problem.
Podival bych se tady:
https://www.hetzner.com/sb/#drives_size_from=12000&drives_size_to=16000
32 TB mista za 55.7 Eur, to je 1.74 Eur za TB mesicne. A je to fungujici server.
Tam samozrejme treba pocitat ze k tomu treba nejake vps(napriklad cloudove za 10€) ako "frontend". Tych diskov sa da potom vyskladat podla potreby kolko je nutne.
-
_Jenda
Tak to souhlas. Nesmyslne vysoke ceny mereneho trafficu, to muze byt dobry prijem. Hetzner a OVH maji neomezeny traffic s pripojkou 1 Gbit, Tam je ta vyhoda jasna. I domaci pripojky jsou na cenu za TB levnejsi, nez cloudovy traffic.
-
_Jenda
Tak to souhlas. Nesmyslne vysoke ceny mereneho trafficu, to muze byt dobry prijem. Hetzner a OVH maji neomezeny traffic s pripojkou 1 Gbit, Tam je ta vyhoda jasna. I domaci pripojky jsou na cenu za TB levnejsi, nez cloudovy traffic.
a zkousel jsi u hetzneru prenaset 100TB dat? Ja jo a dostal jsem nehezky email.
-
_Jenda
Tak to souhlas. Nesmyslne vysoke ceny mereneho trafficu, to muze byt dobry prijem. Hetzner a OVH maji neomezeny traffic s pripojkou 1 Gbit, Tam je ta vyhoda jasna. I domaci pripojky jsou na cenu za TB levnejsi, nez cloudovy traffic.
a zkousel jsi u hetzneru prenaset 100TB dat? Ja jo a dostal jsem nehezky email.
100 TB behem kratke doby jsem nikdy nikde zatim neprenasel, rocne souctem na vsech mistech bych mohl siti prohnat neco okolo 10 TB. Behem kratke doby (cca 10 dni) jsem mel nejvetsi traffic 6 TB. Mam zkusenosti jen s OVH. Tam pri mesicnim transferu k 8 TB (muj rekord) nikdo nic nerikal (server ma vice uzivatelu - celkovy transfer bude jeste vyssi).
Pamatuji si pred 12 lety, na Kimsufi 100 Mbit linka a mesicni limit 5 TB (po prekroceni 5 TB zpomaleni linky na 10 Mbit/s) za cca 500 Kc/mesic a neomezene linky staly 100 Mbit okolo 3000 Kc a 1 Gbit okolo 30 000 Kc mesicne. Ale pak limity zrusily a dnes uz se pripojeni 100 Mbit ani nepouziva, mozna u nejlevnejsich serveru. Meli to udelane tak, ze prichozi traffic se nepocital, jen odchozi. Prichozi traffic nijak moc rust nemuze bez odchoziho trafficu - brzo se zaplni disky pokud nejde o velmi dobre komprimovana data (ale i tak).
Nove zatim rekordni mesicni Traffic moje 8 TB plus ostatni uzivatele nevim. Nikdo si neztezoval. I na domaci pripojce od Tmobilu jsem na domaci pripojce prohnal 6 TB za dva tydny. K zadnemu stezovani nedoslo. Bezna moje spotreba dat na siti je 200-600 GB mesic. Jedna se taky o vyzkumna data ve vetsine. Zbytek napr. youtube.
Hetzner ma na webu napsane neomezena data u 1 Gbit pripojky, u 10 Gbit pripojky je po prekroceni limitu tusim 2 Eur/TB. Nejspis pocitaji s tim, ze nikdo nebude permanentne vyzname vytezovat 1 Gbit linku (coz se vetsinou nedeje). Smluvni podminky poruseny nebyly, Pri provozovani Toru Hetzner moc radost z toho nema a snazi se to maximalne omezit. Nebo ma obavu o provoz Torrentu, zdileni nelegalnich filmu a podobne. Proto mozna reagoval na podezrely traffic. O jaka data slo a co presne ti vytykal nevim. Po vysvetleni, ze jde o vyzkum, by to mohl pochopit.
OVH maji ceny take docela prijatelne. Hetzner ma i svuj levny webserver, na kterem je ovsem malo mista a omezena data. Takze nepouzitelne.
100 TB jsem zatim nikde neprotacel, tak nemam zkusenosti, co na to poskytovatel serveru nebo domaci pripojka. Mohou mit podezreni na nelegalni zdileni prez torrenty a pod. Nebo dokonce provoz Toru.
-
Tady je 4x disk 16 TB, RAM 64 TB, 1 IPV4 adresa za 81 Eur mesicne - SX64
https://www.hetzner.com/dedicated-rootserver/matrix-sx/
V pripade 4 uzivatelu dohromady by to bylo 21 Eur pro kazdeho.Pri navyseni RAM na 128 GB vc. EEC pak u 4 uzivatelu 27 Eur pro kazdeho. To je asi nejlevnejsi konfigurace, jak dostat pozadovany vykon.
*Traffic usage is unlimited and free of charge.
Please note that our unlimited traffic policy does not apply to servers that have the 10G uplink addon. In this special case, we will charge the usage over 20TB with € 1.00/TB. (The basis for calculation is for outgoing traffic only. Incoming and internal traffic is not calculated.) There is no bandwidth limitation.
-
jtrmal
Uz Te napadlo, do ceho by jsi sel ?
Petr Branik
O co jim slo, nebo cim hrozily ? Mel jsi klasicky neomezeny 1 Gbit ? Nevadilo jim seedovani torrentu, provoz proxy nebo Tor nodu ? To se poskytovatelum casto nelibi, hlavne na univerzitnim-kolejnim prostredi je s tim docela problem.
Jinak take premyslim, zda do Hetzeru jit.
-
> Jinak take premyslim, zda do Hetzeru jit.
Mám tam malý server 16GB/8core/30€. Tuším že traffic je do 20TB zdarma. Linka zhruba 1.5Gbps. Za poslední rok 1 výpadek na zhruba 10 hodin. Žádné info ani omluva, když jsem se zeptal co se stalo, řekli mi, že na node kde běží můj server musela být provedena urgent maintenance.
-
Tady mají sice malý HDD ale unmetered traffic za 96$. Možná by to šlo spojit s úložištěm, které není dostupné všem z internetu, ale poze jednomu účtu (typu ulozto). https://www.fdcservers.net/configurator?fixedFilter=20&fixedFilterType=bandwidth_option
-
jtrmal
Uz Te napadlo, do ceho by jsi sel ?
Sli jsme do toho Hetzneru, vzal jsem tu SX64 masinu za cca 80 euro/mesic. Pocital jsem to a ono je to v zasade cena elektriny (8KC/kW). Nahodit to byla docela hracka, vcetne semi-automaticke instalace debianu z jejich install environmentu a dalsich veci. Zatim jen pozitivni zkusenosti. Bylo by fajn, kdyby poskytovali lepsi monitoring, nez ted, ale holt to resim vlastni instanci zabbixu.
-
- Cloud Egress Costs (https://getdeploying.com/reference/data-egress)
- How much 1 TB of egress costs by cloud provider (https://programming.dev/post/9842621)
-
MarekKnapek
Hetzer vypada nejlevneji. Okolo 1 Euro za TB, tedy 100 Eur za 100 TB. Traffic maji psany jako unlimited a tak zlezi hlavne na dostatecnem mistu na disku a pripojce. Da se i dostat pod 0.2-0.1 Eur za TB. Pod 0.2 Eur za TB se dneska v Praze da dostat i s domaci pripojkou (dokud traffic nebude nekomu divny). Stejne tak pisi neomezene i u OVH.
Microsoft, Amazon, Google cloud a dalsi (zejmena Netlify) se absolutne nevyplati, cena nesmyslna.
-
A máte nějaký tip na nejlepší službu s poměrem cena/výkon, co zvládá i přejmenování složek? Ty, co jsou postavené na owncloudu/nextcloudu to nezvládají a nutí mě to zůstat u Dropboxu...