Hardware pro virtualizaci a domácí router

Re:Hardware pro virtualizaci a domácí router
« Odpověď #15 kdy: 14. 08. 2022, 19:50:42 »
hmm ide o tu zravost ... musime elektrinou setrit, preto si server nemozem dovolit a ntb ma vacsinou 1x eth.Uvazoval som uz aj nad niecim takym, ale procesorovo je to podobne ako odroid, akurat vyhoda je viac gigabit portov. Teda otazne je ci to skutocne zvlada gigabit.

A este som zabudol napisat, ze by to malo mat aspon 4 sata porty.

Aj ked som nasiel nejake priemiselne MB, ktore by splnali poziadavky, avsak tie ceny su zavratne a to dokonca bez cpu
Tak si porid cmoudove reseni. Sorry ale mas protichudne pozadavky. Vykon stoji energii. Muzes to taky resit zapinanim/vypinanim a mit maly router bokem.
Jinak pro nenazranou domacnost doporucuji vlastni dum a energii si vyrabet.
Kde vydis ze mam protichudne pozadavky ?
Je jasne, ze to nebude zrat 5W, ale nechcem ani server co zere v idle 100W.
Pocitam, ze odroid (nemam to zmerane) bude zrat do tych 10W, pri max zatazeni do 20W.
Teraz by bolo priechodne tie T-eckove intely TDP 35W v pohode.
Nepotrebujem vela, len trocha zvysit vykon, lebo j4105 v kvm zvlada traffic tak do 600 Mbps a namiesto 2x sata chcem 4x sata.

Kvoli jednej zakladnej doske, nebudem investovat do fotovoltajiky tisice eur.
Tak to te zklamu. Na skutru bernardyna s rodinou rychlosti 120km/h nerozvezes.To jsem nevidel ani ve Vietnamu.
Potrebujes  si nechat ten skutr a poridit tranzita.

Kdybys tam nemel zfs,ty virtualy na kvm s pozadavkem na takovy traffic+ pamet tak se da neco vymyslet.

1.Najdi si extra hiperf router na fw/gw malou krabicku.

2. K tomu serverlab co si budes zapinat dalkove on demand kdyz nechces investovat do energii / premyslet nad usporami.

Nevim proc resis TDP kdyz to o realne spotrebe nic nevypovida. Mrkni do datasheetu cpu nebo k tomu pridej bulharskou konstantu +20%. A to pocitam jen CPU bez dalsich obvodu.

Hp microserver gen10 PLUS ma kolem 25-30W v idle s ssd. Zalezi na cpu a nacpanosti komponenty, power profilu.


k3dAR

  • *****
  • 2 838
  • porad nemam telo, ale uz mam hlavu... nobody
    • Zobrazit profil
    • E-mail
Re:Hardware pro virtualizaci a domácí router
« Odpověď #16 kdy: 14. 08. 2022, 21:41:13 »
Tak to te zklamu. Na skutru bernardyna [...]
[...] Hp microserver gen10 PLUS ma kolem 25-30W v idle s ssd. Zalezi na cpu a nacpanosti komponenty, power profilu.
az na to ze o tom HP si ty psal az POTOM co on psal o zravosti jako reakci na bazarove servery s Xeonem ;-)

Re:Hardware pro virtualizaci a domácí router
« Odpověď #17 kdy: 15. 08. 2022, 00:38:04 »
Tak to te zklamu. Na skutru bernardyna [...]
[...] Hp microserver gen10 PLUS ma kolem 25-30W v idle s ssd. Zalezi na cpu a nacpanosti komponenty, power profilu.
az na to ze o tom HP si ty psal az POTOM co on psal o zravosti jako reakci na bazarove servery s Xeonem ;-)
Psal jsem umyslne. Aby si uvedomil ze v idle to fakt neni tech 100W. Mne prijde tech 30W v mensi vybave tj 1TB sata ssd+32GB ram fakt v pohode. Na to ze je tam slaby xeon.

David

  • ***
  • 143
    • Zobrazit profil
Re:Hardware pro virtualizaci a domácí router
« Odpověď #18 kdy: 15. 08. 2022, 06:42:55 »
Asus PN51 je dobrý tip. Teď už oznámili i novou verzi PN52 (zatím není), u ní je také možnost druhého ethernetu, ale asi to nepůjde reálně koupit.

Stolní počítač (tower) se mi zdá na router špatné řešení.

Re:Hardware pro virtualizaci a domácí router
« Odpověď #19 kdy: 15. 08. 2022, 11:28:02 »
Kdyby to mela byt masinka jen na virtualizaci, tak si myslim, ze by mohlo stacit neco takoveho. To ma prijemne malou spotrebu. Navic 4x 2.5Gbps Intel porty a slusne CPU.

Jako mini ITX mam tuhle desku Supermicro X11SCL-IF s i3-8350k a 32 GB RAM.
Deska ma 4x SATA, m.2 slot na NVME, 2x 1Gbps Intel porty a moje oblibene IPMI.
Spotrebu nemam zmerenou, ale odhadem bude tak 50-60W (v IDLE) s 6x SATA HDD, 2x SATA SSD (pripojene na HBA) a Platinum PSU.



robin martinez

  • *****
  • 1 138
  • Have you hugged your toilet today?
    • Zobrazit profil
    • Null Storage
    • E-mail
Re:Hardware pro virtualizaci a domácí router
« Odpověď #20 kdy: 15. 08. 2022, 11:39:28 »
Pacilo by sa mi take nieco, je to vsak vsetko stare s podporou starych 22 nm CPU Broadwell, Haswell. Ma to vsak 2x lan a 6x sata, co je fajn.
Neviem preco vyrobcovia gigabyte, acrock a spol. teraz take dosky nevyrabaju.


tyto desky mam doma - od h87, h97 pres H170, H270 po b360n. Vetsinou presne tyhle microITX od gigabytu a jsou to hrozny pecky. Taky z toho mam doma router a testovaci servery. Na tohle je to super s tim, co ty desky maji za konektory. Ale vesmes to je jedno
One machine can do the work of fifty ordinary men. No machine can do the work of one extraordinary man.

I do Linux, Hardware and spaghetti code in PHP, Python and JavaScript

motyq

Re:Hardware pro virtualizaci a domácí router
« Odpověď #21 kdy: 15. 08. 2022, 12:23:29 »
Také jsem několik let různě ladil, hledal, provozoval hračko krabičky, ale nikdy to nebylo ono. Postupně jsem doiteroval do klasické microITX desky plus plnotučný procesor (jak už tu někdo zmínil několikrát)
V mém případě:
AMD Ryzen 5 PRO 4650G
Gigabyte B450 I AORUS PRO WIFI
3x8TB na nas/samba (postupně během asi 12let zmigrováno z původně 3x0.5TB)
512GB nvme na systém a kontejnery
32GB Ram
10gbit ethernet do switche (už mám 2.5gbit switch a postupně měním tam kde mám jen 1gbit).

Předtím to bylo pořád takové divné, různé atom krabičky, raspberry a nikdy to nebylo ideál. Něco muselo jet pořád (adguard, dhcp, grafana/prometheus), něco nemuselo (naska, herní servery). Ale bylo to neustálé sr..ní.

Teď je vše konsolidováno, běží mit tam několik lxd a dockerů, pak v kvm homeassistant, samba na nasku, propojené 10Gbitem do hlavního switche a od té doby pohoda.
Celý home net (lab) mi žere 100W (hlavní 10/2.5/1gbit s poe, APčka a další switchě různě po baráku - poe z toho hlavního) a dávno jsem zahodil myšlenku řešit spotřebu co nejméně.
Různými pokusy o ušetření na elektrice jsem utratil více peněz, než kolik s těmi 100W propálím za dalších 5let (i s dnešními cenami)...

Teď prostě jedním čudlem zapnu všechno naráz, výkonu na rozdávání, když chci něco vyzkoušet tak je to otázka vteřiny rozjet další docker/lxd/kvm a neřešit. (ještě tedy další věc - různé síťové prvky jsem konsolidoval za ubiquity/unify a tím mi odpadla další část starostí)...

Doporučení ode mě - moc neřešit spotřebu, spíš se zaměřit co od toho chceš ve smyslu labení a pořídit cokoliv "plnotučného" a ne úplně prehistorického (lepší řízení spotřeby). Po pár letech provozu si poděkuješ, ušetřené peníze (čás, slepé cesty) můžeš investovat třeba do alkoholu :-)

ps: samozřejmě raspberry pi různě na hraní stále jedou, ale už nejsou součástí "životně" důležité infrastruktury.

Re:Hardware pro virtualizaci a domácí router
« Odpověď #22 kdy: 16. 08. 2022, 08:29:36 »
Jinak pro nenazranou domacnost doporucuji vlastni dum a energii si vyrabet.
Energii myslíš elektrickou ? Pokud ano,(např. přes fotovoltaniku) jak ji chceš vyrábět v zimě ?

Ale jinak máš recht, pokud chceš výkon potřebuješ energii, se zákony fyziky se vyjebat nedá. A pokud to někdo dokáže budu mu velmi vděčný když mě to naučí.

Re:Hardware pro virtualizaci a domácí router
« Odpověď #23 kdy: 16. 08. 2022, 09:31:43 »
K domácímu servření doplním několik pozorování z vlastní zkušenosti. Nejde přímo o reakce na předchozí odpovědi...
  • Překvapilo mě, jak dobře se hodí plnohodnotné IPMI, iDRAC nebo iLO atp, Hlavně pokud je člověk zvyklý na plnohodnotnou vzdálenou správu odjinud.
  • Hodně se tu řeší spotřeba. Spousta dnešních serverů má dost pokročilé řízení spotřeby, automatickou regulaci ventilátorů, účinné zdroje atp. Obrovský vliv má ve výsledku způsob použití. Pokud se používají zbytečné služby, člověk ad hoc tvoří a neuklízí testovací virtuály a kontejnery, má server větší spotřebu.
  • 10GBe že energii. Uživatel si musí rozmyslet, co je pro něj přínosné a kdy už jde o rozmar. Třeba zde je srovnání síťovek, které by člověk mohl najít v různých bazarových serverech https://www.servethehome.com/qsfp-v-sfp-v-10gbase-t-testing-power-consumption-differences/. Přijde mi, že hlavně starší síťové karty moc úsporné nejsou, i když zdaleka nejsou plně využity. Ne úplně obstarožní intel x550 má odběr: https://www.intel.com/content/dam/www/public/us/en/documents/product-briefs/ethernet-x550-brief.pdf
  • Výpočetní grafiky mají docela velký idle odběr: Tesla P100 řádově 30 W, Quadro RTX4000 řádově 10 W. Detailnějí namátkou: https://www.servethehome.com/nvidia-quadro-rtx-6000-gpu-review/7/. Osobně mi přijde, že v idle je Tesla žravější. Mít tedy v domácím labu plonkovou GPU, která se využívá jen občasně stojí energii.

Re:Hardware pro virtualizaci a domácí router
« Odpověď #24 kdy: 16. 08. 2022, 09:50:42 »
Téměř 10 let provozuji i3-3220T s 16GB a 6 disky. Měřená spotřeba je průměrně 42 W. Chlazené je to čtyřmi 120mm větráky, takže to bez problému vydrží i zavřené v komoře. Za tu dobu jsem musel monitor a klávesnici připojit asi dvakrát, takže ani nepřítomnost IPMI není větší problém (a to se mi v šuplíku válí PiKVM). Běží na tom fileserver, pár kontejnerů a KVM virtuálů.

Re:Hardware pro virtualizaci a domácí router
« Odpověď #25 kdy: 16. 08. 2022, 12:52:26 »
K domácímu servření doplním několik pozorování z vlastní zkušenosti. Nejde přímo o reakce na předchozí odpovědi...
  • Překvapilo mě, jak dobře se hodí plnohodnotné IPMI, iDRAC nebo iLO atp, Hlavně pokud je člověk zvyklý na plnohodnotnou vzdálenou správu odjinud.
  • Hodně se tu řeší spotřeba. Spousta dnešních serverů má dost pokročilé řízení spotřeby, automatickou regulaci ventilátorů, účinné zdroje atp. Obrovský vliv má ve výsledku způsob použití. Pokud se používají zbytečné služby, člověk ad hoc tvoří a neuklízí testovací virtuály a kontejnery, má server větší spotřebu.
  • 10GBe že energii. Uživatel si musí rozmyslet, co je pro něj přínosné a kdy už jde o rozmar. Třeba zde je srovnání síťovek, které by člověk mohl najít v různých bazarových serverech https://www.servethehome.com/qsfp-v-sfp-v-10gbase-t-testing-power-consumption-differences/. Přijde mi, že hlavně starší síťové karty moc úsporné nejsou, i když zdaleka nejsou plně využity. Ne úplně obstarožní intel x550 má odběr: https://www.intel.com/content/dam/www/public/us/en/documents/product-briefs/ethernet-x550-brief.pdf
  • Výpočetní grafiky mají docela velký idle odběr: Tesla P100 řádově 30 W, Quadro RTX4000 řádově 10 W. Detailnějí namátkou: https://www.servethehome.com/nvidia-quadro-rtx-6000-gpu-review/7/. Osobně mi přijde, že v idle je Tesla žravější. Mít tedy v domácím labu plonkovou GPU, která se využívá jen občasně stojí energii.

Par poznamek:
ad 1) cokoliv pro vzdaleny pristup je doslova spasa, ale zalezi na pouziti, pokud to nekdo pouziva stylem "nastav a zapomen", tak tech pripadu bude mnohem mene a nejake pripojeni monitoru a klavesnice neni na obtiz
pokud ale budu brat nekoho (jako ja), ktery si jednou do mesice neco vymysli a pak to zvrta... tak je pak opruz pripojovat monitor a klavesnici co chvili
ad 2) ano, zbytecne LXC, docker ci VMka budou pridavat na spotrebe, ale porad to bude IMO mene, nez extra masinky (at uz RPi ci jine mensi stroje) na kazdy projekt, takze jeden vykonejsi server bude urcite uspornejsi nez hromada mensich (bude zalezet od poctu a o jakem serveru bude rec), sam mam par RPi na hrani, kdyz si chci neco vyzkouset na ARM, ale na spoustu veci je x86 porad king
ad 3) 10Gbe zere energii, ale zalezi na tom, pres co ten 10Gbe jedu... nejvic zere med - RJ45, tak jak napr. X540/X550, ale spotreba klesa kdyz pouziji optiku ci DAC (troufam si tvrdit, ze tam rozdil oproti 1Gbe RJ45 a 10GBe po DAC kabelu ve spotrebe nebude velky), ale je samozrejme otazka jestli a na co komu doma 10Gbe je, sam ho doma mam, ale pote co jsem vse zredukoval na 1 server, tak to trochu postrada smysl, ac mam Wifi 6 APcka, ktere pres ten 1Gbit teoreticky daji... pri dvou serverech to mozna dava smysl, kdy je napriklad migrace mezi servery podstatne rychlejsi... osobne by mi stacilo na domaci hrani mit 2.5Gbe, ale ten jeste neni tak rozsireny (o serverech nemluve, kde je bud 1Gbe nebo pak az 10Gbe)

Molex1

  • ***
  • 213
    • Zobrazit profil
    • E-mail
Re:Hardware pro virtualizaci a domácí router
« Odpověď #26 kdy: 17. 08. 2022, 08:12:33 »
Jinak na Mironetu jsou i Téčkové procesory (TDP 35W) pro desátou generaci Intelu... od dvoujader po i9 10 jader/20 vláken...

Molex1

  • ***
  • 213
    • Zobrazit profil
    • E-mail
Re:Hardware pro virtualizaci a domácí router
« Odpověď #27 kdy: 18. 08. 2022, 02:32:15 »
Jinak moje i7 9700, 4x8GB RAM, Radeon RX570 8GB, SATA SSD, 3x velké ventilátory má idle pod Windows cca 40W (na měřáku), pod MacOS cca 50W,
je tam tedy připojeno pár USB zařízení (zvukovka, KVM switch atd... ) takže pár Wattů bych asi srazil dolů a ono asi i 4K monitor (resp. na grafice) se také lehce může projevit...

Molex1

  • ***
  • 213
    • Zobrazit profil
    • E-mail
Re:Hardware pro virtualizaci a domácí router
« Odpověď #28 kdy: 18. 08. 2022, 10:47:41 »
Ještě jedna velmi low-cost varianta hotové PC Acer Aspire XC-840 - čtyřjádrový atom N6005, SODIMM RAMky atd... na NAS + PiHole případně routování by to mohlo stačit a myslím, že to bude tak 10-20W v závislosti na HDD vychází kolem 7000Kč

Re:Hardware pro virtualizaci a domácí router
« Odpověď #29 kdy: 18. 08. 2022, 11:58:00 »
Ja mam taku predstavu.
Teraz je zname, ze mam Odroid H2 (2x SSD samsung evo  ZFS na system (proxmox) 2x 16GB RAM). Slape to super, nerobi to problemy.
Spolu tam mam asi 10 LXC a 2x KVM (prevazne je to vsetko v idle).
Avsak 1 KVM je pfSense, cize MB, CPU, NIC a SSD musia byt OK 24/7/365, pretoze ak nieco z toho padne, tak je OFF vsetko, vratane celej LAN a internetu.

Pozeral som gigabyte mini ITX, prip. m ATX s dvoma NIC (NIC  by mali byt intel, pretoze pfsense/opnsense odporucaju intel (aj ked na Odroide nemam intel a slape to OK). Prip. uvazujem 1 x NIC na MB a druhu do PCIe slotu.

Pozeral som aj na mikcroservery od HP, alebo NASy, ale to su vsetko parametrovo pomerne slabe a o hodne drahsie ako skladacka.

2 Molex1 ten N6005 je o nieco lepsi ako moj terajsi j4105, ale velmi by som tym neziskal.
Tu je porovnanie toho co by som chcel, co ponukas a co mam avsak  i3 1210U a R5 5600U su znacne nad rozpocet a neviem ci sa vobec daju kupit.
Za dalsie, by bolo dobre hladat dosku s cipsetom co vie IOMMU (ak by som sa niekedy rozhodol nieco do VM posuvat).
A  v neposlednom rade je dolezity aj rozpocet. Budem este pilne hladat :)