Skládaný rackový server nebo koupený?

Skládaný rackový server nebo koupený?
« kdy: 01. 07. 2025, 12:51:23 »
Chcel by som si poskladat rackovy (homelab) server (1U max 2U). Nemusia tam byt prioritne serverove komponenty (MB, RAM, zdroj atd...).
Kludne tam moze byt nejaka asrock, gigabyte mini ITX/m ATX MB, alebo nieco podobne.
Nejake case som v ramci ceny nasiel napr..
Co sa tyka MB, tak prioritne pre mna je 2x LAN, 2x NVMe (ak nebude NVMe, tak aspon 4x SATA).
Chcel by som tam dat Proxmox.

Inak nasiel som celkom peknu zostavu za slusnu cenu.
Nie je sice urcena pre rack, ale paramtrovo by sa mi hodila pre homelab.
Ma niekto skusenosti s bastlenim homelabu ?

Zda sa mi, ze plnokrvne servery od dellu, hp, supermicro a pod. su cenovo dost hore a spotrebou tiez. Ma to byt prevazne homelab v idle, takze preto by som si to zbastlil sam.


Re:Skladany rackovy server, alebo kupit ?
« Odpověď #1 kdy: 01. 07. 2025, 13:05:39 »
Řešil jsem před časem totéž a zvolil jsem HP T640 - původně tenký klient s Ryzenem, žere to pár wattů a pro homelab v idle s pár VM na Proxmoxu naprosto v pohodě.
Vlákno https://forum.root.cz/index.php?topic=29812.0

Re:Skladany rackovy server, alebo kupit ?
« Odpověď #2 kdy: 01. 07. 2025, 13:13:20 »
Co je vlastně cílem? Jde o tu funkčnost pro domácí síť a praktický užitek nebo si chceš vyzkoušet nějaký konkrétní HW, který bys potkal někde v datacentru nebo firemní serverovně?

Doma totiž neplatíš za jednotlivé pozice v racku, takže není potřeba se tolik omezovat. Můžeš klidně koupit 4U skříň, do které se vejde libovolná ATX deska, spousta karet a disků. Taky tam máš standardní ATX zdroj atd. Osobně bych šel spíš touhle cestou.

Pokud je cílem si sáhnout na nějaký „enterprise“ hardware, tak doma poskládaná stavebnice není úplně to pravé. Pro tenhle účel by vyhověl spíš nějaký vyřazený profesionální server (ale u něj je potřeba počítat s vyšší hlučností a spotřebou).

Re:Skládaný rackový server nebo koupený?
« Odpověď #3 kdy: 01. 07. 2025, 14:06:48 »
U desktop komponent je v 1U často problém s výškou - CPU chladič, chladič napájecí kaskády, zadní I/O, problém může být i s RAM moduly, a čímkoli do PCI(e).

Ani do 2U se normální PCI(e) karty nevlezou.

BoaR

Re:Skládaný rackový server nebo koupený?
« Odpověď #4 kdy: 01. 07. 2025, 16:14:04 »


RDa

  • *****
  • 2 992
    • Zobrazit profil
    • E-mail
Re:Skládaný rackový server nebo koupený?
« Odpověď #5 kdy: 01. 07. 2025, 16:50:45 »
Na tyhle ucely je dobry NUC - ma to rozumnou spotrebu, ale bohuzel jen jeden ETH port - coz ani tak neva, pokud to nechces strkat na kriticke misto v domaci siti - mezi vnitrni a vnejsi sit. Nekdy tam jsou 2 nvme (napr. mam nuc6i7kyk, 64G), nekdy pak NVME + 2.5" sata (napr. Gigabyte BRIX.. jsem ted zkousel GB-BRR7H-4800 / 64G a GB-BMCE-4500C / 32G).. dokonce ten celer n4500 s 6W TDP ma virtualizaci (zralo to 8W idle, 18W load .. na zasuvce).

Druhou sitovku vlastne muzes poresit pres USB3.

Ty veci co maj 4x SATA ale disky maj vedle sebe, takze tam potrebujes mit vetrak na max jinak se to upece.. jsou meh.. a 4 disky budou mezi +32w az +40w k zbytku.. takze to uz moc low power neni.

jjrsk

  • *****
  • 784
    • Zobrazit profil
Re:Skladany rackovy server, alebo kupit ?
« Odpověď #6 kdy: 01. 07. 2025, 16:58:48 »
Pokud je cílem si sáhnout na nějaký „enterprise“ hardware, tak doma poskládaná stavebnice není úplně to pravé. Pro tenhle účel by vyhověl spíš nějaký vyřazený profesionální server (ale u něj je potřeba počítat s vyšší hlučností a spotřebou).
Tak, na hrani je idealni proste nejakej HW za pivo ... Nebude to tichy pod postel, ale prozmenu to typicky bude mit dost rameti, 2+ CPU, dva zdroje, nejaky ten drac/ilo/... a samozrejme tomu adekvatni spotrebu.

Pokud to ma bezet trvale doma v kumbale, tak microservery od HP bejvaly na to tema dobrej kup, ale uz to neni co bejvalo. Posledni solidni G8 ti dneska lidi po 8 letech provozu nabidnou za cenu, za kterou to kupovali tenkrat novy.  Dalo se to koupit od 150ti Ecek. G10 uz nema ilo, nema vymenitelny cpu ... a je vyrazne drazsi.

Ta tvoje vybrana sestava nema ani ECC takze se serverama to nema spolecnyho vubec nic. Mimochodem ...

" 90T úložného priestoru "

Fakt? To beru za tu cenu.

Re:Skládaný rackový server nebo koupený?
« Odpověď #7 kdy: 01. 07. 2025, 17:02:19 »
nechces zadarmo starou pixlu myslim 2u server se starym xeonem, masina hp.
zere a silene huci :-)

Brumla

  • ***
  • 125
    • Zobrazit profil
    • E-mail
Re:Skládaný rackový server nebo koupený?
« Odpověď #8 kdy: 01. 07. 2025, 17:22:48 »
nechces zadarmo starou pixlu myslim 2u server se starym xeonem, masina hp.
zere a silene huci :-)
Nehučí. Vzlétá.  8) ;D
Měl jsem enterprise server doma a při startu to je jak start kosmické lodi. A žere to jak tank. Domů jedině na experimenty a seznámení se s enterprise hw. Jinak je fakt lepší server z jakéhokoliv stolního pc. Pokud nevyřazují v práci, tak bazoš nebo mám osvědčený technimax, levnepc a importpc. Použité z korporátů včetně záruky.

Buldr

  • ***
  • 155
    • Zobrazit profil
Re:Skládaný rackový server nebo koupený?
« Odpověď #9 kdy: 01. 07. 2025, 20:33:06 »
I Tebou zmiňovaní výrobci poskytují základní desky pro servery s IPMI tudíž není důvod je vyřazovat z výběru jen proto, že většinou vyrábí zábavní desky. Kdyby to bylo o týden dříve, nabídl bych HP Micro G8 a Dell R220 - už jsou ve sběrných surovinách.

Asrock EPYC3451D4I2-2T se hodně povedla (součástky a pájení bez defektů s opravou), nabízí v základu duální 10GbE (X710), kdežto přímý konkurent Supermicro M11SDV-8C-LN4F-O má "jen" 4x 1GbE atd. Rozumím, že ani jedna není Tvůj šálek čaje, protože to máš na bastlení, ale nezatracuj ostatní výrobce, protože třeba SuperMicro není žádné terno (Tyan jsou o parník dál).
Carpe diem

Re:Skládaný rackový server nebo koupený?
« Odpověď #10 kdy: 02. 07. 2025, 00:36:51 »
Taky doporučuju si jej poskládat z běžných komponent. Já to před časem vyřešila s B550/Ryzen 5 9500x, 64GB RAM, do toho bazarovou SAS kartu, další síťovku a hromádku disků a zabalila to do Intertech rackového 3U case. Už do 3U nacpeš běžný ATX zdroj i nižší PCI karty a slušný větrák. Místo Proxmoxu preferuju virtualizaci na běžné distribuci Debianu, ale to je jedno, zvládne to pěkných pár virtuálů. A non ECC mi teda zatím nezpůsobil žádný problém ani při vysokém uptime. Myslím, že ty důležité věci, jako databáze, mají celkem funkční korekce. A jinak samozřejmě zálohovat. Celé to mám v racku spolu se switchem a s UPSkou.
Naproti tomu jsme do školy koupili před časem za pár korun vyběhaný 1U Dell PowerEdge R610, jak píšou kolegové - je to hlučné, žravé, a tahle generace serverů nemá vůči byť staršímu Ryzenu výkonově šanci. Do školy nebo do firmy bych takové bastlené řešení nedala, ale do homelabu na hraní, nějakou tu NAS a třeba i na veřejný LAMP server to není žádný problém.

Re:Skládaný rackový server nebo koupený?
« Odpověď #11 kdy: 02. 07. 2025, 10:18:57 »
Ano jedna sa o homelab. Aby bolo jasne, tak nezacinam teraz. Zacinal som pred pred cca 18 rokmi s
Kód: [Vybrat]
Server: Compaq deskpro
CPU: Intel PIII 1GHz
Ramm: 512MB
HDD: 120GB (2,5″)
Použity OS: Linux Ubuntu server 9.04
Neskor to bolo
Kód: [Vybrat]
Asrok Q1900 ITX
Ram: 8GB
SSD: 2x 256GB
Potom
Kód: [Vybrat]
Odroid H2
Ram: 32GB
1x NVMe
2X SSD 512GB
v sucasnosti
Kód: [Vybrat]
MB: Gigabyte GA-IMB410M (rev. 1.0)
Ram 32GB
2x SSD 256GB system
2x SSD 1TB data
CPU: Core i5 10400

So vsetkym som bol spokojny a aj teraz som spokojny, ale vzdy sa po niecom obzeram a chcem sa priblizovat ku profi. Ale viem, ze nikdy to profi nebude, pretoze nedam si homelab co ma spotrebu xxx W.
Dnes ked pychnem do zasuvky watmeter, kde mam povesenu tu poslednu zostavu (+ switch, ONT a UPS) tak ukazuje medzi 36-40W. Pri max zatazi cca 60W.
Roky bezim na proxmoxe a na domace pomery tam neni toho moc (2VM (bez win) a 15LXC). Mam tam bezne veci ako kazdy domaci kutil, od apachov, proxy server, pfsense (preto 2 NIC), nextcloud, zabbix, collabora, wireguard, adt atd atd ......

Nechcem stare profi zelezo s 4 jadrovymi xeonami co maju spotrebu v idle (s celym ansablom) 100W.

Super spotrebu som mal s odroid H2 (divim sa, ze so vsetkym to bolo 17W).
Odroid by som mal doteraz, ale v KVM mam pfsense a bohuzial viac ako 600 Mbit/s to neutiahlo.
Inet mam 800 Mbit/s ... mohol som sice nad tym kyvnut rukou, ale odroid mal cca 3 roky, tak som ho vymenil.
Uvazoval som aj o odroid H4+, ma to 4 sata, 2 NIC, ale CPU je hmmm (sice spotrebou by to bolo super, ale ak by som potreboval trocha viac vykonu tak neviem, neviem).

RDa

  • *****
  • 2 992
    • Zobrazit profil
    • E-mail
Re:Skládaný rackový server nebo koupený?
« Odpověď #12 kdy: 02. 07. 2025, 11:38:27 »
Tak jestli uz ted mas i5-10400 @ B410 a hledas neco s lepsi efektivitou, budes muset jit do modernejsiho zeleza, na bazi DDR5.

Jedna z variant je AM5 APU (tj. single die, bez IOD), druha jsou modernejsi intely (12-13-14th gen), at uz v P+E variante, nebo jestli hledas lowcost reseni, tak treba ty N300 ? cpu kde jsou jen E-cores (pokud budes mit stesti, naleznes o chlup rychlejsi reseni za o neco mensi spotrebu).


Z mych benchmark tabulek (idle/load spotreba, C = kernel compile):

14C/20T i5-13500 @ Q670 ... 20 / 98 W ... perf: 19.56 (C/hr), eff 199.6 (C/kWh)
8C/16T R7-4700U ... 14 / 43 W, perf: 8.232, eff: 191.4

V generaci co mas soucasnou sestavu - efektivta bude jen trocha lepsi a absolutni vykon mas polovicni nez tohle (vykon +- odpovida spotrebe v zatezi):

10C/20T i9-10900K (bez vyuziti K) ... 20 / 205 W ... perf: 17.9, eff: 87.0

TLDR: moderni i5-13500 strci do kapsy i9-10900K - o neco vyssim vykonem ale za polovicni spotrebu.


Re:Skládaný rackový server nebo koupený?
« Odpověď #13 kdy: 02. 07. 2025, 21:20:21 »
Servery se od běžných PC liší ve dvou věcech - vzdálený přístup a chlazení. Pokud není nutné řešit přístup, tak nejlepší je poskládat nějaký větší tower s co nejvíc větráků (něco jako 4x140mm, klidně podvoltovaných, pro začátek). Komponenty ti za nižší teploty poděkují. Sám jsem za posledních 15+ roků, pro svoji potřebu, kupoval a na serverovny umisťoval desítky serverů, ale doma mám stále bigtower a ten běží a běží a běží (aktuálně se 4x18TB RAIDem a 30 W příkonu). A jinak není nic, čím se "přibližovat k profi". Věci jako hot-swap, SMP, TB RAM nebo interconnect (třeba IB, Slingshot) nejspíš budou overkill.