Zmrznutie webservera - Host/Network unreachable

[Bzron]

Dobry den,

prevzal som spravu nad webserverom - OpenSuse11.4, kde je hostovanych zhruba 30 stranok, apache + php + mysql, nic velke nic extra vsetko bezi bez problemov az na jeden den v mesiaci,

mam to 2 mesiace pod spravou a kazdy mesiac to 1x vypadne a posledne co vidim na obrazovke je

"Host/Network unreachable ( not found) check IP tables ", a stroj uplne vytuhne a musim ho na tvrdo restartnut, nabehne vsetko ok a ideme dalej.

Pri prehliadani logov som nic zvlastne nenasiel proste ide ide ide cierna tma 5 minut a po restarte vsetko ide dalej,
otazka:

Nemohlo sa jednat o DDos utok ? a odpalilo sietovku ? - len hadam
Nieco ine vas nenapada ?

Dakujem

[Reklama]

[Mirek Prýmek]

Příčinou může být kde co. Bez dalších informací ti nikdo neporadí.

Další informace = zjistit, v jakém stavu stroj je v tu chvili, kdy je nedostupný - stavy procesu, routovací tabulka, firewallová pravidla, zkusit ping na gateway atd.

Pokud jsi stroj převzal, existuje i možnost, že si na něm předchozí admin otevřel zadní vrátka a teď si z tebe dělá srandu. Nebo je to hw závada síťovky. Nebo prostě jenom mírně vadný síťový kabel atd. atd.

Nepíšeš, jak ten stroj restartuješ, když neodpovídá. Pokud k němu máš plný KVM přístup nebo fyzický přístup, analyzuj ten stav ve výpadku. Pokud ne, dej si do cronu příkaz, který ti třeba každých 15 minut ty potřebné informace zapíše někam do souboru a analyzuj je po restartu.

[Bzron]

Příčinou může být kde co. Bez dalších informací ti nikdo neporadí.

Další informace = zjistit, v jakém stavu stroj je v tu chvili, kdy je nedostupný - stavy procesu, routovací tabulka, firewallová pravidla, zkusit ping na gateway atd.

Pokud jsi stroj převzal, existuje i možnost, že si na něm předchozí admin otevřel zadní vrátka a teď si z tebe dělá srandu. Nebo je to hw závada síťovky. Nebo prostě jenom mírně vadný síťový kabel atd. atd.

Nepíšeš, jak ten stroj restartuješ, když neodpovídá. Pokud k němu máš plný KVM přístup nebo fyzický přístup, analyzuj ten stav ve výpadku. Pokud ne, dej si do cronu příkaz, který ti třeba každých 15 minut ty potřebné informace zapíše někam do souboru a analyzuj je po restartu.

Dakujem, za odpoved spravim ako hovoris - neni tu niaky like alebo body co by som ti mohol davat ?))

A specificky presne tato hlaska ti teda nehovori nic ? stroj bol uplne tuhy mam knemu fyzicky pristup a len toto na obrazovke a na nic nereagoval.

[mhepp]

Zkus nainstalovat atop, který umí ukládat stav systému: vytížení disku, procesoru, paměti, sítě... Který proces kolik co sežral a tak.

[Mirek Prýmek]

Dakujem, za odpoved spravim ako hovoris - neni tu niaky like alebo body co by som ti mohol davat ?))

Co bych s tema bodama delal? )

A specificky presne tato hlaska ti teda nehovori nic ? stroj bol uplne tuhy mam knemu fyzicky pristup a len toto na obrazovke a na nic nereagoval.

Aha, to je dost podstatna informace. Pochopil jsem to tak, ze jsi ke stroji pristupoval z dalky a nedostal se na nej, protoze se odrizl od site.

Takze jestli to ted spravne chapu, v te chvili vypadku se na nej neprihlasis ani pres lokalni konzoli ("klavesnici a monitor primo pripojeny k tomu serveru") -- tj stroj vubec nereaguje na psani na klavesnici a na monitoru sviti posledni hlaska "Host/Network unreachable ( not found) check IP tables". Je to tak?

Pokud to tak je, tak je to blby. Nejspis by to vypadalo na hw zavadu nebo dost zasadni chybu v nejakem ovladaci (vzhledem  k te hlasce nejspis ovladaci sitovky, ale ne nutne).

Tezko rict, co v takove situaci delat. Moc ti toho nezbyva, maximalne jeste zkusit, jestli stroj reaguje na SysRq - viz http://www.root.cz/clanky/sysrq-klavesa-pro-reseni-problemu/

[Reklama]

[Bzron]

Aha, to je dost podstatna informace. Pochopil jsem to tak, ze jsi ke stroji pristupoval z dalky a nedostal se na nej, protoze se odrizl od site.

Takze jestli to ted spravne chapu, v te chvili vypadku se na nej neprihlasis ani pres lokalni konzoli ("klavesnici a monitor primo pripojeny k tomu serveru") -- tj stroj vubec nereaguje na psani na klavesnici a na monitoru sviti posledni hlaska "Host/Network unreachable ( not found) check IP tables". Je to tak?

Pokud to tak je, tak je to blby. Nejspis by to vypadalo na hw zavadu nebo dost zasadni chybu v nejakem ovladaci (vzhledem  k te hlasce nejspis ovladaci sitovky, ale ne nutne).

Tezko rict, co v takove situaci delat. Moc ti toho nezbyva, maximalne jeste zkusit, jestli stroj reaguje na SysRq - viz http://www.root.cz/clanky/sysrq-klavesa-pro-reseni-problemu/
[/quote]

Ano zle som sa vyjadril, presne jak hovoris, stroj mrtvy pri fyzickom pristupe. Ok dakujem skusim to, nemam stym skusenosti tak uvidime.

Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...

[MP]

Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...

Ten stroj ma jasny HW problem. A pokud neni mozno migrovat a ani nejsou backupy, zcela jasne bych od toho dal ruce pryc, to uz ceka, kdy se ten pruser hodi na hlavu toho, kdo s tim dela.

[Bzron]

Natom stroji je vela problemov je tam kompilovany apache + kernel a niak to cele blbne, 16 GB stroj, ktory hostinguje tak 30 stranok, nic zlozite php stranky, a dost casto ten apache mrzne a neviem co stym, nie su stroje na niaku migraciu ani backup takze sa stym dost tazko hybe ...

Ten stroj ma jasny HW problem. A pokud neni mozno migrovat a ani nejsou backupy, zcela jasne bych od toho dal ruce pryc, to uz ceka, kdy se ten pruser hodi na hlavu toho, kdo s tim dela.

Atak je to mozne ale stale sato da zachranit neni tam toho az tak vela aby to bol problem, ...kazdopadne ja si aj tak myslim ze to bol DDoS utok a odpalilo to interface, aktualne sa idem pozret tymto smerom.

Rady ako bojovat proti DDoS ? Dakujem

[Dzavy]

Nema to ciste nahodou disky pripojeny pres iSCSI?

[Bzron]

Nema to ciste nahodou disky pripojeny pres iSCSI?

na 99% ma, ale teraz je server dolu budem vediet povedat az potom

[Dzavy]

Nema to ciste nahodou disky pripojeny pres iSCSI?

na 99% ma, ale teraz je server dolu budem vediet povedat az potom

No tak to pak celkem vysvetluje. Z nejakyho duvodu to k nim vzdycky ztrati sitovy spojeni a tim padem je celej server v haji a neudelas nic ani z lokalni konzole.

[samalama]

Nema to ciste nahodou disky pripojeny pres iSCSI?

myslis, ze by pouzivali iscsi a nemali by ani "zalozny" server?

[samalama]

Nema to ciste nahodou disky pripojeny pres iSCSI?

na 99% ma, ale teraz je server dolu budem vediet povedat az potom

nemylis si nahodou scsi s iscsi?

[Dzavy]

Nema to ciste nahodou disky pripojeny pres iSCSI?

myslis, ze by pouzivali iscsi a nemali by ani "zalozny" server?

Vubec by me to neprekvapilo. iSCSI spatla leckdo i se Synology NAS

[Bzron]

Ok problem bol zla webova aplikacia- zly query ktory to vsetko zozral + zle nastavenie mysql, mysql calculator ukazoval potrebu 50gb ramky na 16 gb servery

aj tak nechapem ako to tak mohlo zaprasit server ale v podstate do 1 minuty zobral 14 gb ramky a 98% CPU.

Do buducna - doucit sa mysql config + optimalizacne nastroje.