Ahoj,
zajimalo by me jak google resi svoje uloziste. Jeji DC jsou slozena z obycejnych desktopu... Jak ale resi uloziste? Maji jedno velke DC vyhradne pro tyto ucely? Jak pak resi zalohu / replikaci maji zalozni DC kam se data periodicky replikuji?
Nebo mezi vsema temito desktopy udelaji jaky si virtualni LVM?
Oni snad nikdy prilis mnoho detailu nezverejnili, ale kdyz chcete vedet vice o tom, jak to ma Google resene, pouzijte Google. Mozna byste neco nasel tady: http://highscalability.com/google-architecture
BTW, oni to nemaji slozene z desktopu, ale motherboardu s pameti, bez grafiky, nejakymi disky, vse pripojene ke zdroji a bez kastle strceno do regalu.
http://labs.google.com/papers/gfs.html prave nefunguje ...
Presnejsie su to ich vlastne custom pc.
HDFS je urcite jedna moznosti.
to mi pripomenulo http://en.wikipedia.org/wiki/Google_File_System
Citace od: andy kdy 23. 05. 2014, 09:53:34
Presnejsie su to ich vlastne custom pc.
Presne tak. Vsechni "vedi" ze google nepouziva drahe znackove servery, ale ze HA resi softwarove a ze vse bezi na lowend hardware. A chteji to delat taky tak. Malokdo ale doda, ze ten lowend HW se neda nikde koupit a ze jim ho na zakazku vyvinul Gigabyte - alespon jednu generaci.
Takze: "Delat to jako Google" opravdu neni jednoduche ani levne.
No to samozrejme neni uplne tak pravda. Oni zacali taky s normalnima deskama a az geneze je dostala k tomu ze si je nechaj delat na zakazku a hlavne k tomu maji patricne upravenej zdroj aby jeho ucinnost byla co nejvyssi.
Neviem ako ma robene datove ulozisko Google a dost pochybujem ze to zverenia. Pocuval som rozhovor sefa jednej podobnej globalnej datovej sluzby a ten napriklad na otazku kde maju uloziska povedal ze na vychodnom a zapadnom pobrezi a kde su presne nemoze povedat. Povedal len ze su prepojene tak ze data su zaroven na vychodnom aj na zapadnom pobrezi a datove ulozisko pre nich robi provider.
http://what-if.xkcd.com/63/