hdfs

8Ciepło

2Odpowiedz

kopiowanie katalogu z systemu lokalnego do kodu Javy hdfs

Mam problem podczas próby skopiowania katalogu z mojego systemu lokalnego do HDFS przy użyciu kodu Java. Jestem w stanie przenosić pojedyncze pliki, ale nie mogę znaleźć sposobu na przeniesienie całeg

5Ciepło

2Odpowiedz

jaka jest najlepsza praktyka przy łączeniu Hive Połączenia JDBC

Używam sterownika Hive JDBC, aby wykonać kwerendę sql jak mój sklep danych HDFS. Próbowałem użyć c3p0 do obsługi puli połączeń. Nie jestem pewien, czy jest to właściwe podejście, ponieważ zapytanie Hi

7Ciepło

2Odpowiedz

Kopiowanie pliku z HDFS na lokalny komputer

Mam problem z próbą "pobrania" pliku z systemu plików HDFS do mojego systemu lokalnego. (nawet jeśli operacja przeciwna działa bez problemu). * Uwaga: Plik istnieje w systemie plików HDFS na określone

24Ciepło

5Odpowiedz

Jak znaleźć rozmiar pliku HDFS

Jak znaleźć rozmiar pliku HDFS? Jakiej komendy należy użyć, aby znaleźć rozmiar dowolnego pliku w HDFS.

7Ciepło

1Odpowiedz

Różnice między hflush i hsync api w HDFS

Czy ktoś może podświetlić szczegóły techniczne i kiedy używać.

32Ciepło

5Odpowiedz

Odmowa uprawnień na hdfs

Jestem nowy na rozpakowany system plików hadoop, wykonałem kompletną instalację pojedynczego węzła hadoop na mojej maszynie.Ale po tym, kiedy mam zamiar przesłać dane do hdfs daje komunikat o błędzie

8Ciepło

1Odpowiedz

Gdzie są przechowywane moje pliki (dir), gdy użyłem hadoop fs -mkdir?

Jestem całkowicie nowy w hadoopie i właśnie skończyłem instalację, która zajęła mi 2 dni ... Próbuję teraz z komendą hadoop dfs, ale po prostu nie mogłem tego zrozumieć, chociaż przeglądałem przez kil

7Ciepło

2Odpowiedz

Debugowanie w PIG UDF

Jestem nowy w Hadoop/PIG. Mam podstawowe pytanie. Czy mamy obiekt do ewidencji w PIG UDF? Napisałem UDF, który muszę zweryfikować Potrzebuję zalogować niektóre instrukcje, aby sprawdzić przepływ. Czy

9Ciepło

4Odpowiedz

Znajdowanie katalogów starszych niż N dni w HDFS

Czy można użyć opcji hadoop fs -ls, aby znaleźć wszystkie katalogi starsze niż N dni (od bieżącej daty)? Próbuję napisać procedurę czyszczenia, aby znaleźć i usunąć wszystkie katalogi w HDFS (pasujące

12Ciepło

3Odpowiedz

Wyświetlanie liczby bloków pliku w hadoopie

Jak wyświetlić liczbę bloków, w których plik został podzielony, w systemie plików Hadoop?