Domácí server na virtualizaci ESX/VMware

TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #15 kdy: 12. 10. 2015, 11:47:06 »
16GB RAM je do zacatku v pohode, ja bych spis sel do 32GB, zvlast ted, kdyz je RAMka za par penez (Vcenter 6 chce min. 8GB RAM sam pro sebe..)

U jednoho fyzického serveru mu VCenter bude celkem k ničemu :-)


TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #16 kdy: 12. 10. 2015, 11:59:34 »
Na VM's pouze SSD, nic jineho v danem poctu VM's nema smysl, protoze 3x HDD se ti useekujou a je jedno v jakym budou RAIDu..

To je taky hov... nepravda.

"cca 6 VM (samba, lamp, dns , dhcp , ntp, firewall , db, aplikacny server, proxy server, testovanie clasteringu+PXE, etc.)"

nic, co by vyžadovalo nějaký extremní výkon disků ani co by je nějak zvlášť zatěžovalo. Běžně provozuji diskově mnohem náročnější instalace na obyčejných SATA discích.

A systém (tzn. ESXi) bych bez obav nainstaloval na USB flash, na nějaké systémové pevné disky bych se vybodl, nemá to absolutně žádný význam, jen vyhozené peníze. Na data SATA disky do RAID5.

cthulhu

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #17 kdy: 12. 10. 2015, 12:10:29 »
"testovanie clasteringu+PXE" viz. zadani, tj. 2-3 nody, 1xVM pro iSCSI target...vevnitr nejake to KVM..to urcite utahne ~300 iops ze dvou low-end HDD, jeste nejakou pohadku prosim.. ::)
Sam jsem na 2xHDD 7200rpm v RAID0 VM's driv provozoval, system se trochu vic zatizi (reboot vsech nodu, paralelni patchovani..), zacnou vznikat timeouty a cluster jde do paniky.

a na co VCenter? treba proto aby se naucil clustering a otestoval si VMotion? 1xVM Vcenter s databazi, 1xVM ESXi, 1xVM ESXi, 1xVM iSCSI a I/O bude sakra potreba..

HDD at si klidne poridi, ale jako uloziste MKV, ne na provozovani virtualu. Protoze CPU se bude flakat a HDD budou chrastit jak o zivot.

Tuxik

  • *****
  • 1 473
    • Zobrazit profil
    • E-mail
Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #18 kdy: 12. 10. 2015, 12:18:57 »
Tak asi je evidentní, že to nebude výpočetní cluster pro NASA, ne? Na pokusy bohatě stačí HDD, jenom bych vyměnil ty pomalý RED krámy aspoň za BLACK, nebo RE.

TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #19 kdy: 12. 10. 2015, 12:27:23 »
"testovanie clasteringu+PXE" viz. zadani, tj. 2-3 nody, 1xVM pro iSCSI target...vevnitr nejake to KVM..to urcite utahne ~300 iops ze dvou low-end HDD, jeste nejakou pohadku prosim.. ::)
Sam jsem na 2xHDD 7200rpm v RAID0 VM's driv provozoval, system se trochu vic zatizi (reboot vsech nodu, paralelni patchovani..), zacnou vznikat timeouty a cluster jde do paniky.

a na co VCenter? treba proto aby se naucil clustering a otestoval si VMotion? 1xVM Vcenter s databazi, 1xVM ESXi, 1xVM ESXi, 1xVM iSCSI a I/O bude sakra potreba..

HDD at si klidne poridi, ale jako uloziste MKV, ne na provozovani virtualu. Protoze CPU se bude flakat a HDD budou chrastit jak o zivot.

Provozuji řadu virtuálů (databázové systémy, fileshary atd...) na diskovém poli se SATA disky, RAID5. Připojeno k ESXi přes NFS. V docela kritickém prostředí. Dále mám i jiná pole - obdobný HW, se SAS disky nebo i s SCSI disky. Rozdíly a dopady na výkon jsou v mém nasazení _minimální_, takže jsem přesvědčen, že pro daný účel nic jiného nepotřebuje.
Mám letité zkušenosti i s virtualizací v prostředí SAN a podobnými srandičkami, ale nemám potřebu se za každou cenu přít s někým, kdo je přesvědčen, že to ví lépe než já.

VMotion si bez licence vyzkouší jen těžko,. resp. jen na zkušební dobu. Pokud bude ovšem mít navíc nějaké další železo, kam by to chtěl zkusit odmigrovat.


TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #20 kdy: 12. 10. 2015, 12:30:41 »
Tak asi je evidentní, že to nebude výpočetní cluster pro NASA, ne? Na pokusy bohatě stačí HDD, jenom bych vyměnil ty pomalý RED krámy aspoň za BLACK, nebo RE.

To je samozřejmé, že ty disky musí mít nějaké parametry a ideálně to bude RAID Edition :-)

anonym

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #21 kdy: 12. 10. 2015, 12:45:53 »
Nějak se diskuze mírně zvrhla. Tazatel se ptal na diskuzi ohledně HW vhodného pro VMWare s přihlédnutím k
Citace
Dodam este, ze ECC nieje pre mna dolezite, no na druhej strane by som sa snazil spotrebu (W) zminimalizovat co najviac, kedze bude bezat 24/7 (samozrejme budem hladat kompromis).


Osobně řeším přesně stejný problém, investičně a provozně nenáročný domácí server na takové to domácí virtualizování, zejména spotřeba vs 24/7 bude asi problém. Nic komerčního (= VCenter licenci si domů koupí jen vysloveně fanda), žádný vysoký výkon. Pořád si pohrávám s myšlenkou místo něj zvolit případně Amazon nebo dalšího hostera. Zvláště pokud finančně to vyjde nastejno.

Díky moc za jinak přínosnou diskuzi.


TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #22 kdy: 12. 10. 2015, 12:59:57 »
Nějak se diskuze mírně zvrhla. Tazatel se ptal na diskuzi ohledně HW vhodného pro VMWare s přihlédnutím k
Citace
Dodam este, ze ECC nieje pre mna dolezite, no na druhej strane by som sa snazil spotrebu (W) zminimalizovat co najviac, kedze bude bezat 24/7 (samozrejme budem hladat kompromis).


Osobně řeším přesně stejný problém, investičně a provozně nenáročný domácí server na takové to domácí virtualizování, zejména spotřeba vs 24/7 bude asi problém. Nic komerčního (= VCenter licenci si domů koupí jen vysloveně fanda), žádný vysoký výkon. Pořád si pohrávám s myšlenkou místo něj zvolit případně Amazon nebo dalšího hostera. Zvláště pokud finančně to vyjde nastejno.

Díky moc za jinak přínosnou diskuzi.

Podle mě to s malou spotřebou udělat nepůjde. Tudíž je potřeba se rozhodnout, zda to stojí za to "mít to doma". Ono hodně z toho, co bylo na začátku zmíněno (běžné síťové služby typu DNS, DHCP, firewall, Samba atd...) se dá bez potíží rozběhat na Raspberry Pi - sám to tak na verzi 2B provozuji k maximální spokojenosti a tomu se už dá říkal levný provoz. Osobně si myslím, že řešit tyto služby doma pomocí virtualizace není zrovna ideální, protože velké železo se nemá nikdy šanci dostat na spotřebu krabiček typu RPi. Na druhou stranu, pokud je potřeba výkon, není vyhnutí.

Pro mě osobně provozovat to někde v cloudu by to nebylo. Stačí, když budete mít doma problém s připojením a celé je to v... však víte kde.

Takže pokud opravdu potřebuje výkon a zároveň to mít pořád dostupné, tak to bez žravého železa nepůjde. Dále ušetříte nějaký odběr, pokud pro data místo HDD použijete SDD, tady je ale potřeba udělat přesný propočet toho, zda rozdíl v ceně nebude vyšší, než peníze ušetřené za elektřinu v rozumném časovém horizontu. A na chlazení, procesoru, tam ušetřit není šance.

Takže opakuji: pokud jde o to provozovat v domácí síti služby s minimálními náklady, tak např. RPi + nějaký diskový box na data. Pokud potřebuji/chci výkon, takhle levně to nikdy nepůjde.

cthulhu

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #23 kdy: 12. 10. 2015, 13:29:33 »
s Core i5-6400T a spravnou deskou s externim napajenim (viz. http://wccftech.com/intel-core-i5-6400t-skylake-cpu-tested/) se da dostat na 10-20W v idle, tolik malem sezere domaci wifi router s TV ve standby, jasne Rasberry to neni, ale vykon je uplne nekde jinde a takovou spotrebu bych uz vazne neresil..to same Intel NUC s Broadwellem, 8W v idle..cena je ale bohuzel uplne nekde jinde nez RB2..

TKL

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #24 kdy: 12. 10. 2015, 13:46:18 »
s Core i5-6400T a spravnou deskou s externim napajenim (viz. http://wccftech.com/intel-core-i5-6400t-skylake-cpu-tested/) se da dostat na 10-20W v idle, tolik malem sezere domaci wifi router s TV ve standby, jasne Rasberry to neni, ale vykon je uplne nekde jinde a takovou spotrebu bych uz vazne neresil..to same Intel NUC s Broadwellem, 8W v idle..cena je ale bohuzel uplne nekde jinde nez RB2..

Pěkné hračky. Ale jak píšete, ta cena. Ono to doma ve většině případů vždycky bude rozhodování o smysluplném poměru cena/výkon. A když pominu ty rozdíly v ceně a spotřebě, tak nemalou roli hraje taky možnost to někam rozumně umístit, aby to v zimě nekondenzovalo vlhkost, v létě se to nevařilo, neprášilo se do toho, nehučelo to a neblikalo někde kde jsou lidi... u krabičky se to dá vyřešit snadno, u opravdového počítače to už je horší.

Sám jsem si během let prošel variantami Domácí síťové služby na  1) stolním PC 2) notebooku 3) RPi a ta poslední varianta je v mém případě naprosto bezkonkurenční jak po stránce finanční, tak po stránce "logistické".

cthulhu

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #25 kdy: 12. 10. 2015, 14:03:58 »
"testovanie clasteringu+PXE" viz. zadani, tj. 2-3 nody, 1xVM pro iSCSI target...vevnitr nejake to KVM..to urcite utahne ~300 iops ze dvou low-end HDD, jeste nejakou pohadku prosim.. ::)
Sam jsem na 2xHDD 7200rpm v RAID0 VM's driv provozoval, system se trochu vic zatizi (reboot vsech nodu, paralelni patchovani..), zacnou vznikat timeouty a cluster jde do paniky.

a na co VCenter? treba proto aby se naucil clustering a otestoval si VMotion? 1xVM Vcenter s databazi, 1xVM ESXi, 1xVM ESXi, 1xVM iSCSI a I/O bude sakra potreba..

HDD at si klidne poridi, ale jako uloziste MKV, ne na provozovani virtualu. Protoze CPU se bude flakat a HDD budou chrastit jak o zivot.

Provozuji řadu virtuálů (databázové systémy, fileshary atd...) na diskovém poli se SATA disky, RAID5. Připojeno k ESXi přes NFS. V docela kritickém prostředí. Dále mám i jiná pole - obdobný HW, se SAS disky nebo i s SCSI disky. Rozdíly a dopady na výkon jsou v mém nasazení _minimální_, takže jsem přesvědčen, že pro daný účel nic jiného nepotřebuje.
Mám letité zkušenosti i s virtualizací v prostředí SAN a podobnými srandičkami, ale nemám potřebu se za každou cenu přít s někým, kdo je přesvědčen, že to ví lépe než já.

VMotion si bez licence vyzkouší jen těžko,. resp. jen na zkušební dobu. Pokud bude ovšem mít navíc nějaké další železo, kam by to chtěl zkusit odmigrovat.

na VMotion testy staci trial, dalsi zelezo nepotrebuje (VMware Workstation -> nested virtualization)

cena consumer SSD (Intel / Crucial BX/MX / whatever) 256GB za 2,5litru je v cene sestavy marginalni v porovnani s vykonem, ktery za to dostane. Ono je rozdil na produkcnim systemu drzet 200 dni uptime do pristiho patchovani a nebo si s tim neustale hrat stylem rekonfigurace -> reboot -> revert snapshotu atd., pracuju s tim denne, takze vim kolik mi to uspori casu, ale kazdy na to asi mame jiny pohled..

Timik

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #26 kdy: 12. 10. 2015, 14:07:00 »
Databazy budem nahadzovat mariadb, mysql, db2 a oracle, ale je to len na testovanie, iba jednu necham nainstalovanu. Aplikacny server budem rozbehavat tomcat, was-ko a glassfish.

S tym SSD mate pravdu a plne suhlasim. Riesenie so SATA DOM SSD je uplne perfektne, aj ked cena 120GB SSD disku je iba o cca 20 E vyssia.
Klasicke disky budu musiet stacit 7200 otackove, lebo 10000-ky uz su niekde inde cenovo. Cestou RAID 5 urcite nepojdem, kedze s vami nemozem nic ine iba suhlasit a radsej nahodim klasicky mirroring do RAID 1, ale az po testovani. Zatial pobezi system v RAID 0, aby to bolo sviznejsie.
Myslite si, ze sa skor oplatia tieto kvalitnejsie Raid disky https://www.alza.sk/wd-re-raid-edition-1000gb-d459810.htm?catid=18851811 , lebo za tu cenu mozem mat viac miesta o 100% cize 2T s tymito https://www.alza.sk/wd-red-2000gb-64mb-cache-d342211.htm?catid=18854642 . Zaujma ma len, ci to bude take citelne na domace vyuzitie (lab prostredie).


- 16GB RAM-ka bude zatial stacit az az.

Ako bolo spomenute VMware je dost vyberavy co sa tyka HW. Povodne som uvazoval nad MB s integrovanym CPU konkretne "ASROCK Q1900DC-ITX", no docital som sa na forach, ze vela ludom sa ESXi nepodarilo rozbehat. Su aj taki ktorym sa to podarilo, ale trebalo prehodit HDD do inej masinky, vratit to naspat plus bolo treba este pouzit externu graficku kartu. Mozno v buducnosti, ked to pobezi budem uvazovat nad kupou a rozbehnutim vCentra.

Dovod preco planujem hypervisorove riesenie ESXi je z dovodu korporatneho pouzitia, teda tento hypervisor sa pouziva castejsie vo velkych firmach. Nemozem avsak povedat, ze v buducnosti nebudem pouzivat KVM, alebo XEN, ale zatial ostanem pri ESXi.


Procesor je z poslednej generacie a samozrejme podporuje VT-x, VT-d vid link, kde je porovnany uz so spomenutym procesorom i5-4590 http://ark.intel.com/compare/90734
Pozeral som si aj AMD-cko 8 nadrovy CPU https://www.alza.sk/amd-fx-8320-d2147648.htm?catid=18855354 , avsak si viete asi predstavit co by to spravilo s uctom pri sprave 24/7 :) Procesor i3-6100T ma TDP 35W a AMD je na 95W.

S podporou platformy skylake som nasiel link v ktorom sa pise, ze sa to uz niekomu podarilo nainstalovat: http://www.v-front.de/2015/10/vmware-introduces-support-for-intel.html
" I do not own such a system myself, but I have heard reports of users who were able to successfully install ESXi 6.0 U1 on such a system."

Co si myslite o zdroji nad ktorym uvazujem "Fortron FSP300-60HHN 85+"? Potiahne to zostavu bez problemov, po pripade mate nejake ine alternativne riesenie? Pre mna by bolo najlepsie pouzit picoPSU, no neviem ci to uz nieje velmi slabe.

Tak isto ako ku zdroju sa mozte vyjadrit aj ku maticnej doske, mozno najdete nieco lepsie.

Btw. dakujem zatial kazdemu za plodnu debatu, urcite si prisli aj ini ludia na svoje, alebo sa aspon odpovedali otazky, na ktore nemali odpovede :)

Rhinox

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #27 kdy: 12. 10. 2015, 14:31:56 »
Nezapomen, ze ESXi neumi soft-/fake-/bios raid! I kdybys v biosu desky nakonfiguroval raid, ESXi uvidi jednotlive disky. Kdyz tedy chces mit disky v raid, potrebujes poradnej hw radic!

A jeste bych zduraznil ze ESXi na rozdil od jinejch systemu NEkesuje disky, takze to chce hw raid-radic s cache, a cim vic, tim lip (HW raid-radic bez cache dava v ESXi vskutku tragicke vysledky). Jestli nesezenes nakej 2nd-hand, pak tohle muze byt lehce ta nejdrazsi polozka ze serveru...

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #28 kdy: 12. 10. 2015, 15:07:05 »
Bez ohledu na esxi je rozumnejsi napr mdadm nez cely slavny levny "taky-RAID".
Děkuji za možnost editace příspěvku.

Ivan

Re:Domácí server na virtualizaci ESX/VMware
« Odpověď #29 kdy: 13. 10. 2015, 08:10:06 »
ASROCK X99X Killer - hezká sestava, ale co spotřeba? To asi nebude mít 30W v idle  :(
Osobně hledám právě něco se spíše nižším výpočetním výkonem, ale taky nízkou spotřebou.

Grafika je GT610(pasivni).
Procesor je XEON 1620v3(s vodni pumpou). Cely to uchladi jeden vetrak, ktery zene vzduch ven z ty bedny skrz mrizku vodniho chlazeni. Bohuzel ta vodni pumpa neni uplne nejtizsi a i originalni vetrak od CoolMaster vydava nejaky zvuky.

V idle to zere 63W(podle udaju ze zdroje). Kdyz ale zacnu neco delat tak spotreba vyleti nahoru. Ta deska ma nejaky specialni power kabel k diskum, ktery je moznuje uplne vypnout, to jsem ale jeste nezkousel.
Ja si to nestavel na provoz 24/7, ale na programovani a testovani.