Big Data - storage

[Josef]

Ahoj,

vcera jsem tu videl konverzaci na tema Hadoop. Po shlednuti par slidu dokumentace me zaujal system storage a jeho replikace. Jeden soubor je rozsekan na X casti a ulozena na ruznem nodu a kazda cast je replikovana na nodech. Kapacita storage se rozrusta podle poctu nodu. Existuje neco takoveho samostatne i mimo hadoop?

omlouvam se za skolacky popis, ale tak snad je jasne co myslim

[Reklama]

[JardaP .]

GlusterFS + striping?

[Matas]

hned z patra mne napada treba XtreemFS, HekaFS (CloudFS), GlusterFS a spousta dalsich... ale souborovych systemu tohohle typu je vice, staci pohledat heslo "distributed filesystems"... kazdy ma nejake sve vyhody ci nevyhody, zavisi na ucelu pouziti.

[fahacz]

http://sheepdog.github.io/sheepdog/
http://ceph.com/

[Ondra Satai Nekola]

Hadoopi FS nemusis pouzivat se zbytkem hadoopu, muzes klidne pouzit jenom FS. Ale zalezi na tom, k cemu presne to potrebujes...

[Reklama]

[Honza]

Kdo z vás reálně používá některý z těch FS, který tu doporučujete?

[DK]

GlusterFS, bez problemu (HA reseni)