hadoop

8Ciepło

1Odpowiedz

Praca Hadoop przy pobieraniu plików wejściowych z wielu katalogów

Mam sytuację, w której mam wiele (ponad 100 MB) plików w skompresowanym formacie gz obecnych w wielu katalogach. Na przykład A1/B1/C1/częściowo 0000.gz A2/B2/C2/częściowo 0000.gz A1/B1/C1/częściowo 00

6Ciepło

3Odpowiedz

Jak przenieść tabelę mysql do ula?

Mam duży tabelę mysql, którą chciałbym przenieść do tabeli Hadoop/Hive. Czy istnieją standardowe polecenia lub techniki przesyłania prostej (ale dużej) tabeli z Mysql do Hive? W tabeli przechowywane s

11Ciepło

5Odpowiedz

Sposób, aby wyeksportować wyniki od świni do bazy

Czy istnieje sposób, aby wyeksportować wyniki ze świń bezpośrednio do bazy danych, takich jak MySQL?

5Ciepło

1Odpowiedz

Hadoop throwing java.lang.VerifyError po wyeksportowaniu pliku JAR

Zmieniam mapę hadoopów - zmniejsz liczbę zadań, które obecnie kompilują i działają bez moich zmian. W ramach pracy będę teraz łączyć się z S3, aby dostarczyć plik. Opracowałem (bardzo prostą) klasę s3

5Ciepło

2Odpowiedz

Czy Hadoop może działać na Nginx?

Czy można uruchomić Hadoop na Nginx? jeśli tak, czy jest jakiś odnośnik?

19Ciepło

4Odpowiedz

Hadoop skopiować katalog?

Czy istnieje interfejs API HDFS, który może skopiować cały katalog lokalny do HDFS? Znalazłem API do kopiowania plików, ale czy istnieje jeden dla katalogów?

5Ciepło

2Odpowiedz

Zadanie Hadoop Streaming nie powiodło się (nie powiodło się) w Pythonie

Próbuję uruchomić zadanie Map-Reduce w Hadoop Streaming ze skryptami w języku Python i otrzymuję te same błędy co Hadoop Streaming Job failed error in python, ale te rozwiązania nie działają dla mnie.

6Ciepło

1Odpowiedz

Określanie kodek kompresji dla INSERT OVERWRITE SELECT w Ulu

mam ula stół jak CREATE TABLE beacons ( foo string, bar string, foonotbar string ) COMMENT "Digest of daily beacons, by day" PARTITIONED BY (day string COMMENt "In YYYY-MM-DD format"

5Ciepło

1Odpowiedz

Jak wesprzeć apache?

Jestem średniozaawansowanym użytkownikiem Java. Chcę przyczynić się do rozwoju Apache, widziałem, że istnieje lista projektów Apache (takich jak Hadoop, Derby itp.), Opracowałem pewne zapytania, na kt

5Ciepło

4Odpowiedz

Sprawdź, czy istnieje tabela

Jaki jest najszybszy sposób sprawdzenia, czy istnieje tabela Hbase? Patrząc na ten API: http://hbase.apache.org/devapidocs/org/apache/hadoop/hbase/client/HBaseAdmin.html Który z nich jest najszybszy: