Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?

Uz delsi dobu se snazim najit nejakou krabici s recentnim kernelem, ktera by obsahovala aspon ty 3 ethernet porty.
Je mi celkem jedno jestli to bude x86 nebo arm, jde mi spise o tu podporu ethernetu.
Ted jsem narazil na PC motherboard ASRock, ktery tomu idealne vyhovuje:
https://www.asrock.com/mb/Intel/Z390%20Taichi%20Ultimate/index.us.asp#Specification
Problem je, ze to budu muset jeste obalit nejakou krabici a cele dovybavit.
Kdyby aspon ta deska nebyla full ATX, ale neco mensiho :(
Cilem je mit linuxovy box, na kterem pujde generovat jak rucni provoz (pcap), tak provadet ruzne skopicinky pri vyvoji ethernet driveru.
Podle toho, co jsem tak ruzne nasel, tak hlavni zadrhel je ten port 10G, ten se moc nevyskytuje.
Nemate nejaky tip?

Diky.
Honza
« Poslední změna: 09. 03. 2021, 22:17:29 od Petr Krčmář »


_Jenda

  • *****
  • 669
    • Zobrazit profil
    • https://jenda.hrach.eu/
    • E-mail
Re:Nejaky devboard ci box s 1x10G a aspon 2x1G ethernet porty?
« Odpověď #1 kdy: 09. 03. 2021, 21:54:06 »
A nemůžeš si koupit miniITX desku a síťovku se dvěma SFP+ do PCIe? A jestli chceš něco malého (ale to asi nebude mít výkon na zpracování těch 10G), tak totéž s miniPCIe… By to možná šlo i do nějakého NUCu se správným breakoutem.

PanVP

  • ****
  • 307
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #2 kdy: 09. 03. 2021, 22:41:11 »
A) Kolik 10 Gb síťovek
B) Jaké ty 10 Gb síťovky mají být (SFP+ nebo Ethernet)
C) Kolik do toho chceš vrazit (litr, pět, dva, deset)
D) Jak velké to má být (Malý boxík, 1U, 2U)
E) Jak dlouho to pojede (jestli tě omezuje spotřeba, nároky na kvalitu boardu)
F) Rozšiřitelnost, co bys do toho chtěl přidat a replikovatelnost (třeba plánuješ 10 tisíc kusů)
G) Co na tom má jet, asi Linux ne?

Kámoš něco určitě má, můžu mu říct.

RDa

  • *****
  • 1 253
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #3 kdy: 09. 03. 2021, 23:33:50 »
Staci chvili hledat:
https://www.supermicro.com/en/products/motherboard/X10SDV-12C-TLN4F+

Tohle ma 10GE v ramci SoC, a podobne reseni nabizi i AMD v embedded verzi (Ryzen V1000 series).
« Poslední změna: 10. 03. 2021, 09:07:28 od Petr Krčmář »

Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #4 kdy: 10. 03. 2021, 16:42:55 »
Staci chvili hledat:
https://www.supermicro.com/en/products/motherboard/X10SDV-12C-TLN4F+
Jojo, ta má plnotučný a relativně úsporný 14nm Broadwell Xeon, 45W. Ty dva 10Gb porty vytažené ze SoCu vedou do SFP+ šachet.

Ještě jsem našel rodinku pár kousků s 14nm ATOMem C3000 series (Denverton):
https://www.supermicro.com/en/products/motherboard/A2SDV-8C-TLN5F
https://www.supermicro.com/en/products/motherboard/A2SDV-12C+-TLN5F
https://www.supermicro.com/en/products/motherboard/A2SDV-16C-TLN5F
SoC má TDP 17-31 W , podle počtu jader (8/12/16).
Onboard 4x 10GBase-T Ethernet = metalika a až v datasheetu čipu X557-AT4 se dá dočíst, že by to snad mělo na metalice podporovat 100/1G/10G.
Formát těch desek je lehce úchylný Flex-ATX = o něco menší než microATX, soudělné díry.
Bohužel v Mini-ITX je od tohoto výrobce k dispozici jenom ATOM s 2x 1Gb.
Jako skříň na Flex-ATX nejsnáz asi nějaký microATX minitower.


Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #5 kdy: 10. 03. 2021, 21:32:42 »
Staci chvili hledat:
https://www.supermicro.com/en/products/motherboard/X10SDV-12C-TLN4F+
Jojo, ta má plnotučný a relativně úsporný 14nm Broadwell Xeon, 45W. Ty dva 10Gb porty vytažené ze SoCu vedou do SFP+ šachet.

Ještě jsem našel rodinku pár kousků s 14nm ATOMem C3000 series (Denverton):
https://www.supermicro.com/en/products/motherboard/A2SDV-8C-TLN5F
https://www.supermicro.com/en/products/motherboard/A2SDV-12C+-TLN5F
https://www.supermicro.com/en/products/motherboard/A2SDV-16C-TLN5F
SoC má TDP 17-31 W , podle počtu jader (8/12/16).
Onboard 4x 10GBase-T Ethernet = metalika a až v datasheetu čipu X557-AT4 se dá dočíst, že by to snad mělo na metalice podporovat 100/1G/10G.

Ty SuperMicro jsou uplny ideal. Bohuzel ty nejmensi, 4-jadrove, zacinaji na 11kKc.
Diky za tip.

/Honza

Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #6 kdy: 10. 03. 2021, 21:41:53 »
A) Kolik 10 Gb síťovek
Staci jedna, prece jenom je to stale dost draha zalezitost.
Citace
B) Jaké ty 10 Gb síťovky mají být (SFP+ nebo Ethernet)
Metalika nebo SFP+, asi to spise zavisi, aby k tomu byl ovladac do kernelu
Citace
C) Kolik do toho chceš vrazit (litr, pět, dva, deset)
Ideal je do 10k za celek, tak nejak ale tusim, ze to bude vic
Citace
D) Jak velké to má být (Malý boxík, 1U, 2U)
At se da nekam soupnout na stul, neslouzi to do racku
Citace
E) Jak dlouho to pojede (jestli tě omezuje spotřeba, nároky na kvalitu boardu)
Pojede to vlastne dost sporadicky, v nejhorsim pres pracovni dobu,
nema to slouzit na kontinualni testovani
Citace
F) Rozšiřitelnost, co bys do toho chtěl přidat a replikovatelnost (třeba plánuješ 10 tisíc kusů)
Cil je mit aspon 10 kousku, proste pro maly tym
Citace
G) Co na tom má jet, asi Linux ne?
Jasne ze linux. A idealne dost recentni, ty zmeny v networkingu jsou dostatecne zajimave, aby tam slapalo neco kolem aktualniho jadra
Citace
Kámoš něco určitě má, můžu mu říct.
Budu rad za jakykoliv tip.

/Honza

Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #7 kdy: 10. 03. 2021, 22:16:29 »
Tyhle síťovky mi jedou v pohodě na linuxu (konkrétně kernel 5.2.14-zen):
https://www.ebay.com/itm/Supermicro-AOC-STG-i2T-V2-10GbE-RJ45-10GBASE-T-Ethernet-Adapter-Intel-X540-T2/363071550075

podpora 100/1G/10G

Karet s chipem Intel-X540 je celkem dost a chodit by měly všechny, tak možná vyjde levněji koupit ty karty zvlášť do levnějších desek.

_Jenda

  • *****
  • 669
    • Zobrazit profil
    • https://jenda.hrach.eu/
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #8 kdy: 10. 03. 2021, 22:18:41 »
A) Kolik 10 Gb síťovek
Staci jedna, prece jenom je to stale dost draha zalezitost.
ASUS XG-C100F stojí trojku. V Linuxu funguje out of the box. Pro propojení dvou počítačů bych použil Direct Attach Cable, https://www.czc.cz/ubiquiti-unifi-direct-attach-copper-cable-10gbps-1m/238739/produkt.

Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #9 kdy: 11. 03. 2021, 20:44:02 »
Jak se ukazuje, tak jsem zapomnel zminit podstatnou vec, ze ta 10G musi podporovat i 5G a 2.5G rychlosti.
Cimz odpadaji cipy, ktere maji "jen" 10G/1G.

PS: Stale bych radeji nejaky box, nez sestavovat vlastni hw.

/Honza

RDa

  • *****
  • 1 253
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #10 kdy: 11. 03. 2021, 21:39:31 »
Jak se ukazuje, tak jsem zapomnel zminit podstatnou vec, ze ta 10G musi podporovat i 5G a 2.5G rychlosti.
Cimz odpadaji cipy, ktere maji "jen" 10G/1G.

PS: Stale bych radeji nejaky box, nez sestavovat vlastni hw.

/Honza

Neznam zadny onboard NIC ktery umi vsechna N-baseT, takze pro tohle pouziti Ti zustava klasicky jakykoliv ITX - s procesorem podle zamyslene zaukolovanosti stroje, a do PCIe strcit x4 kartu s jednim metalickym RJ45 a chipsetem napr. od Aquantia (a tim si zadelat na problemy s verzi jadra atd). V optice (SFP) se na 2.5G/5G nikdy snad ani nehralo.

To co chcete by se mozna snaz realizovat na Win, kvuli ovladacum. Takze.. poradte si :)

PanVP

  • ****
  • 307
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #11 kdy: 12. 03. 2021, 08:51:27 »
(SFP) se na 2.5G/5G nikdy snad ani nehralo.

Tak to nemáš pravdu kamaráde :-)

Jak to tedy je:
- síťová karta s SFP+ slotem je takový domeček pro výkonný prvek, což je v tomhle případě SFP+ modul
- SPF+ modul zajišťuje komunikaci s protikusem a signály přenáší do síťové karty maximální společnou rychlostí
- 10 Gbitová síťová karta z Aliexpressu stojí třeba 500,- Kč, já je kupuji levněji

A teď se pojďme podívat na generické SPF+ moduly s metalikou.

Jako vzorový si vezmeme třeba generický a poměrně široce kompatibilní modul Mikrotik S+RJ10 r2
Nejprve se podíváme na Alzu, kde jsou popisy samozřejmě NAPROSTO ŠPATNĚ
https://www.alza.cz/mikrotik-s-rj10-d5258279.htm
Už už se nám zdá, že jsi měl pravdu ty a já se pletl.
Ale protože víme, že na Alze ...no... ::) ... raději si ověříme informace u výrobce.
https://mikrotik.com/product/s_rj10

A tradááá: Data Rate   10 Mbps, 100 Mbps, 1 Gbps, 2.5 Gbps, 5 Gbps, 10 Gbps

A ano, jsou SPF+ moduly, které oficiálně 2.5G nebo 5G neumí.
Nicméně to nelze prohlásit za vlastnost té technologie.

PS: A na samotné optice jsou pomalejší moduly zcela běžné, třeba pro SAN.
« Poslední změna: 12. 03. 2021, 08:57:45 od PanVP »

Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #12 kdy: 12. 03. 2021, 11:07:56 »
Ano, PanVP má pravdu. Je ale dobré se před případnou koupí HW podívat do manuálu. Někdy je starší HW trošku specifický. Pokud se nepletu, data rates 2.5 Gbps a 5Gbps na SFP+ byly přidány až poměrně nedávno: https://en.wikipedia.org/wiki/10_Gigabit_Ethernet#Standards. Třeba starší, ale na bazarech rozšířený Intel X550 může podporovat explicitní volbu 2.5 a 5 Gbps podle systému: https://www.intel.com/content/www/us/en/support/articles/000030131/network-and-io/ethernet-products.html.

PanVP

  • ****
  • 307
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #13 kdy: 12. 03. 2021, 11:24:58 »
Je ale dobré se před případnou koupí HW podívat do manuálu.

Nechci být rýpal, ale nahradil bych slovíčko "dobré" za "naprosto nezbytné".

Tak například:
UFQantia (UFO+Aquantia) umí 10 Gb Ethernet až na XY metrů po Cat 5e.
Běžné 10 GbE prvky (původně navržené do serveroven) ovšem umí 10 Gb Ethernet umí na 30 metrů, ale nejméně po Cat 6a.
Další prvky umí 10 GbE na 45 metrů po Cat 6a a po Cat 5e umí 10 GbE na 15 metrů, chaos, chaos, chaos...

Je v tom neskutečný chaos.
Obecně se dá říct:
- prvky určené do serveroven 10 GbE umí spolehlivě na 15 metrů po Cat 6a.
- prvky určené do domácností 10 GbE to umí i po Cat 5e do 30m, ale jejich spolehlivost je...no...řekl bych pochybná

RDa

  • *****
  • 1 253
    • Zobrazit profil
    • E-mail
Re:Nějaký devboard či box s 1×10GE a aspoň 2×1GE porty?
« Odpověď #14 kdy: 12. 03. 2021, 12:10:26 »
(SFP) se na 2.5G/5G nikdy snad ani nehralo.

Tak to nemáš pravdu kamaráde :-)


Sorry, ale mam? :-)

Proc Ti vypadl z citace pocatek vety? V optice (SFP) se na 2.5G/5G nikdy snad ani nehralo.

Myslel jsem tim standard ktery by byl nazyvan 2.5GBASE-[SR|LR|ER] ci 5GBASE-[SR|LR|ER].
Existuje jenom -KR, coz je SFI rozhrani po tistaku, ne po optice.

To co jsi linkoval, nejsou opticke rozhrani, ale klasicky NBASE-T po metalice.