dostęp do pliku, który jest napisany

Question

You use the hadoop fs –put command to write a 300 MB file using and HDFS block size of 64 MB. Just after this command has finished writing 200 MB of this file, what would another user see when trying to access this file? 

a.) They would see Hadoop throw an ConcurrentFileAccessException when they try to access this file. 
b.) They would see the current state of the file, up to the last bit written by the command. 
c.) They would see the current of the file through the last completed block. 
d.) They would see no content until the whole file written and closed. 

z tego co rozumiem o poleceniu hadoop fs -put odpowiedź jest D, jednak niektórzy twierdzą, że jest C.

ktoś może zapewnić konstruktywne wyjaśnienie jednej z opcji?

Dzięki xx

Answer 1

Powodem plik nie będzie dostępny aż cały plik jest zapisywany i zamykany (opcja D), ponieważ w celu uzyskania dostępu do pliku, wniosek jest najpierw przesyłany do NameNode , aby uzyskać metadane dotyczące różnych bloków, które tworzą plik. Te metadane zostaną zapisane przez NameNode dopiero po otrzymaniu potwierdzenia, że ​​wszystkie bloki pliku zostały pomyślnie zapisane.

W związku z tym, mimo że bloki są dostępne, użytkownik nie może wyświetlić pliku, dopóki metadane nie zostaną zaktualizowane, co następuje po zapisaniu wszystkich bloków.

Answer 2

Natychmiast po utworzeniu pliku jest on widoczny w przestrzeni nazw systemu plików. Żadna treść zapisana w pliku nie może być widoczna, jednak:

Po zapisaniu danych bloku, pierwszy blok będzie widoczny dla nowych czytelników. Dotyczy to również kolejnych bloków: zawsze jest zapisywany bieżący blok, który nie jest widoczny dla innych czytników. (Z ostatecznego przewodnika Hadoop, model spójności).

Tak, pójdę z Opcji C

Również spojrzeć na to związane question.