hadoop

5Ciepło

2Odpowiedz

Skośne połączenie świni z dużą tabelą powoduje "Przekroczony rozmiar metadanych przekroczył 10000000"

Mamy połączenie świni pomiędzy małym (16-rzędowym) odrębnym stołem i dużym (6-rzędowym) skośnym stołem. Regularne dołączanie kończy się po 2 godzinach (po kilku poprawkach). Wypróbowaliśmy using skewe

7Ciepło

1Odpowiedz

Impala nie może znaleźć com.mysql.jdbc.Driver

Próbuję skonfigurować Cloudera Impala z CDH4 w trybie pseudo rozproszonym w Red Hat 5. Mam Hive używający JDBC do połączenia z metastorem MySQL, ale mam kłopoty z ustawianiem Impala z JDBC. Postępuję

6Ciepło

1Odpowiedz

Grupa przez wielu polach i wyjściowego krotki

mam paszy w następującym formacie: Hour Key ID Value 1 K1 001 3 1 K1 002 2 2 K1 005 4 1 K2 002 1 2 K2 003 5 2 K2 004 6 i chcę grupy pasza przez (Hour, Key) następ

6Ciepło

4Odpowiedz

Nie można ustawić uprawnień ścieżki: \ tmp

Failed to set permissions of path: \tmp\hadoop-MayPayne\mapred\staging\MayPayne2016979439\.staging to 0700 Otrzymuję ten błąd podczas wykonywania zadania MapReduce, używałem hadoop 1.0.4, wtedy dowi

8Ciepło

3Odpowiedz

Running Map-Reduce pracę na konkretnych plików/bloków w HDFS

Po pierwsze, jestem nowy na Hadoop :) Mam duży zestaw danych pliki spakowane gzipem (TBS dokumentów w pliki spakowane gzipem wokół wielkości 100-500mb każdy). Zasadniczo potrzebuję jakiegoś filtrowani

14Ciepło

3Odpowiedz

Niezgodność typu klucz z mapy: oczekiwany org.apache.hadoop.io.Text, recieved org.apache.hadoop.io.LongWritable

Próbuję uruchomić mapę/reduktor w java. Poniżej znajdują się moje pliki WordCount.java package counter; public class WordCount extends Configured implements Tool { public int run(String[] arg0) t

5Ciepło

1Odpowiedz

Usuwanie zadań z interfejsu użytkownika Oozie?

Oozie wyświetli wszystkie przesłane prace w interfejsie internetowym, w tym URUCHOMIENIE, ZABIJONE, PREP itp. Czy istnieje sposób na usunięcie zadań z interfejsu WWW oozie bez bezpośredniej edycji met

37Ciepło

11Odpowiedz

Zapytanie o wstawianie ula, takie jak SQL

Jestem nowy w ulu i chcę wiedzieć, czy istnieje jakakolwiek wstawka danych do tabeli ula, tak jak to robimy w SQL. Chcę wstawić swoje dane do ula jak INSERT INTO tablename VALUES (value1,value2..) C

6Ciepło

3Odpowiedz

Relacje między Hadoop a bazami danych

Ok .. Próbowałem przeszukać stronę i tę stronę, aby uzyskać odpowiedź na to pytanie, która wydaje się być bardzo podstawowym pytaniem. Jestem kompletnym noobem do przetwarzania dużych ilości danych. C

47Ciepło

4Odpowiedz

Zatrzymanie ikony Java Coffee Cup w Docku na Mac OSX

Po aktualizacji do OSX 10.8.4 procesy Java w tle zaczęły umieszczać ikonę Java Cup w Docku. Powoduje to, że aktualnie aktywne okno traci koncentrację, co jest bardzo denerwujące przy uruchamianiu skry