Czy ktoś ma jakieś pojęcie o pracy zarówno z CloudStore i HDFS. Chciałbym zobaczyć, jak daleko skaluje się CloudStore i jak intensywnie zostało użyte w produkcji. CloudStore wydaje się być w pełni funkcjonalny niż HDFS. Zastanawiając się nad tymi dwoma systemami plików, jakie są praktyczne kompromisy?CloudStore vs. HDFS
5
A
Odpowiedz
2
Wygląda na to, że CloudStore powinien być szybszy niż HDFS, ponieważ został zaprojektowany w C++. Jesteśmy również zainteresowani tym porównaniem i planujemy wykorzystać to w produkcji.
Daj nam znać, jeśli znajdziesz coś interesującego pod tym względem.
1
CloudStore (lub KFS) jest teraz systemem plików Quantcast (lub QFS). Projekt znajduje się obecnie pod adresem https://github.com/quantcast/qfs i ma stronę comparison with HDFS, którą możesz obejrzeć.
"Jak jest zaprojektowany w C++"? W przypadku rozproszonych systemów plików, w których problemy z wydajnością zwykle nie wynikają bezpośrednio z obciążenia obliczeniowego, oczekiwałbym, że algorytmy będą ważyć nieco bardziej niż języki. – drxzcl
W zależności od skali. W niskiej skali, która jest poprawna. Jeśli zarządzany język narzuca 10% narzut, musisz mieć o 10% więcej serwerów. W pewnym momencie jest taniej napisać coś w C++, niż kupić 10% więcej serwerów. Wiem, że większość ludzi nie ma tego problemu, ale wkrótce to zrobię. –