Fórum Root.cz

Hlavní témata => Server => Téma založeno: Bzron 23. 05. 2016, 10:08:46

Název: Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 23. 05. 2016, 10:08:46
Dobry den,

prevzal som spravu nad webserverom - OpenSuse11.4, kde je hostovanych zhruba 30 stranok, apache + php + mysql, nic velke nic extra vsetko bezi bez problemov az na jeden den v mesiaci,

mam to 2 mesiace pod spravou a kazdy mesiac to 1x vypadne a posledne co vidim na obrazovke je

"Host/Network unreachable ( not found) check IP tables ", a stroj uplne vytuhne a musim ho na tvrdo restartnut, nabehne vsetko ok a ideme dalej.

Pri prehliadani logov som nic zvlastne nenasiel proste ide ide ide cierna tma 5 minut a po restarte vsetko ide dalej,
otazka:

Nemohlo sa jednat o DDos utok ? a odpalilo sietovku ? - len hadam
Nieco ine vas nenapada ?

Dakujem
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Mirek Prýmek 23. 05. 2016, 10:17:26
Příčinou může být kde co. Bez dalších informací ti nikdo neporadí.

Další informace = zjistit, v jakém stavu stroj je v tu chvili, kdy je nedostupný - stavy procesu, routovací tabulka, firewallová pravidla, zkusit ping na gateway atd.

Pokud jsi stroj převzal, existuje i možnost, že si na něm předchozí admin otevřel zadní vrátka a teď si z tebe dělá srandu. Nebo je to hw závada síťovky. Nebo prostě jenom mírně vadný síťový kabel atd. atd.

Nepíšeš, jak ten stroj restartuješ, když neodpovídá. Pokud k němu máš plný KVM přístup nebo fyzický přístup, analyzuj ten stav ve výpadku. Pokud ne, dej si do cronu příkaz, který ti třeba každých 15 minut ty potřebné informace zapíše někam do souboru a analyzuj je po restartu.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 23. 05. 2016, 10:35:48
Příčinou může být kde co. Bez dalších informací ti nikdo neporadí.

Další informace = zjistit, v jakém stavu stroj je v tu chvili, kdy je nedostupný - stavy procesu, routovací tabulka, firewallová pravidla, zkusit ping na gateway atd.

Pokud jsi stroj převzal, existuje i možnost, že si na něm předchozí admin otevřel zadní vrátka a teď si z tebe dělá srandu. Nebo je to hw závada síťovky. Nebo prostě jenom mírně vadný síťový kabel atd. atd.

Nepíšeš, jak ten stroj restartuješ, když neodpovídá. Pokud k němu máš plný KVM přístup nebo fyzický přístup, analyzuj ten stav ve výpadku. Pokud ne, dej si do cronu příkaz, který ti třeba každých 15 minut ty potřebné informace zapíše někam do souboru a analyzuj je po restartu.

Dakujem, za odpoved spravim ako hovoris - neni tu niaky like alebo body co by som ti mohol davat ?))

A specificky presne tato hlaska ti teda nehovori nic ? stroj bol uplne tuhy mam knemu fyzicky pristup a len toto na obrazovke a na nic nereagoval.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: mhepp 23. 05. 2016, 13:01:48
Zkus nainstalovat atop, který umí ukládat stav systému: vytížení disku, procesoru, paměti, sítě... Který proces kolik co sežral a tak.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Mirek Prýmek 23. 05. 2016, 13:40:35
Dakujem, za odpoved spravim ako hovoris - neni tu niaky like alebo body co by som ti mohol davat ?))
Co bych s tema bodama delal? :)))

A specificky presne tato hlaska ti teda nehovori nic ? stroj bol uplne tuhy mam knemu fyzicky pristup a len toto na obrazovke a na nic nereagoval.
Aha, to je dost podstatna informace. Pochopil jsem to tak, ze jsi ke stroji pristupoval z dalky a nedostal se na nej, protoze se odrizl od site.

Takze jestli to ted spravne chapu, v te chvili vypadku se na nej neprihlasis ani pres lokalni konzoli ("klavesnici a monitor primo pripojeny k tomu serveru") -- tj stroj vubec nereaguje na psani na klavesnici a na monitoru sviti posledni hlaska "Host/Network unreachable ( not found) check IP tables". Je to tak?

Pokud to tak je, tak je to blby. Nejspis by to vypadalo na hw zavadu nebo dost zasadni chybu v nejakem ovladaci (vzhledem  k te hlasce nejspis ovladaci sitovky, ale ne nutne).

Tezko rict, co v takove situaci delat. Moc ti toho nezbyva, maximalne jeste zkusit, jestli stroj reaguje na SysRq - viz http://www.root.cz/clanky/sysrq-klavesa-pro-reseni-problemu/
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 24. 05. 2016, 10:18:28

Aha, to je dost podstatna informace. Pochopil jsem to tak, ze jsi ke stroji pristupoval z dalky a nedostal se na nej, protoze se odrizl od site.

Takze jestli to ted spravne chapu, v te chvili vypadku se na nej neprihlasis ani pres lokalni konzoli ("klavesnici a monitor primo pripojeny k tomu serveru") -- tj stroj vubec nereaguje na psani na klavesnici a na monitoru sviti posledni hlaska "Host/Network unreachable ( not found) check IP tables". Je to tak?

Pokud to tak je, tak je to blby. Nejspis by to vypadalo na hw zavadu nebo dost zasadni chybu v nejakem ovladaci (vzhledem  k te hlasce nejspis ovladaci sitovky, ale ne nutne).

Tezko rict, co v takove situaci delat. Moc ti toho nezbyva, maximalne jeste zkusit, jestli stroj reaguje na SysRq - viz http://www.root.cz/clanky/sysrq-klavesa-pro-reseni-problemu/
[/quote]

Ano zle som sa vyjadril, presne jak hovoris, stroj mrtvy pri fyzickom pristupe. Ok dakujem skusim to, nemam stym skusenosti tak uvidime.

Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: MP 24. 05. 2016, 10:22:23
Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...

Ten stroj ma jasny HW problem. A pokud neni mozno migrovat a ani nejsou backupy, zcela jasne bych od toho dal ruce pryc, to uz ceka, kdy se ten pruser hodi na hlavu toho, kdo s tim dela.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 24. 05. 2016, 12:07:10
Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...

Ten stroj ma jasny HW problem. A pokud neni mozno migrovat a ani nejsou backupy, zcela jasne bych od toho dal ruce pryc, to uz ceka, kdy se ten pruser hodi na hlavu toho, kdo s tim dela.

Atak je to mozne ale stale sato da zachranit neni tam toho az tak vela aby to bol problem, ...kazdopadne ja si aj tak myslim ze to bol DDoS utok a odpalilo to interface, aktualne sa idem pozret tymto smerom.

Rady ako bojovat proti DDoS ? Dakujem
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Dzavy 24. 05. 2016, 13:57:38
Nema to ciste nahodou disky pripojeny pres iSCSI?
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 24. 05. 2016, 14:56:27
Nema to ciste nahodou disky pripojeny pres iSCSI?
na 99% ma, ale teraz je server dolu budem vediet povedat az potom :D
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Dzavy 24. 05. 2016, 17:15:33
Nema to ciste nahodou disky pripojeny pres iSCSI?
na 99% ma, ale teraz je server dolu budem vediet povedat az potom :D
No tak to pak celkem vysvetluje. Z nejakyho duvodu to k nim vzdycky ztrati sitovy spojeni a tim padem je celej server v haji a neudelas nic ani z lokalni konzole.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: samalama 25. 05. 2016, 09:03:32
Nema to ciste nahodou disky pripojeny pres iSCSI?

myslis, ze by pouzivali iscsi a nemali by ani "zalozny" server?
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: samalama 25. 05. 2016, 09:04:42
Nema to ciste nahodou disky pripojeny pres iSCSI?
na 99% ma, ale teraz je server dolu budem vediet povedat az potom :D

nemylis si nahodou scsi s iscsi?
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Dzavy 25. 05. 2016, 12:41:12
Nema to ciste nahodou disky pripojeny pres iSCSI?

myslis, ze by pouzivali iscsi a nemali by ani "zalozny" server?

Vubec by me to neprekvapilo. iSCSI spatla leckdo i se Synology NAS :)
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 27. 05. 2016, 09:45:22
Ok problem bol zla webova aplikacia- zly query ktory to vsetko zozral + zle nastavenie mysql, mysql calculator ukazoval potrebu 50gb ramky na 16 gb servery

aj tak nechapem ako to tak mohlo zaprasit server ale v podstate do 1 minuty zobral 14 gb ramky a 98% CPU.

Do buducna - doucit sa mysql config + optimalizacne nastroje.
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: samalama 27. 05. 2016, 09:56:24
oom killer nic?
Název: Re:Zmrznutie webservera - Host/Network unreachable
Přispěvatel: Bzron 27. 05. 2016, 10:49:09
oom killer nic?

Zabijal vsetko ale nedostal sa ztoho,

prvy krat v zivote som videl zabiteho crona, atd ale nedostal sa ztoho ...