hive

7Ciepło

4Odpowiedz

Jestem nowy w Hadoop Hive i pracuję nad rozwiązaniem raportowania. Problem polega na tym, że wydajność zapytania jest bardzo powolna (ul 0.10, hbase 0.94, hadoop 1.1.1). Jedno z pytań to: select a.*,

13Ciepło

3Odpowiedz

Jak utworzyć korpus z 100 milionami tweetów?

Chcę utworzyć korpus tekstowy zawierający 100 milionów tweetów za pomocą pakietu rozproszonego T dla komputerów PC (zwanego tm.plugin.dc). Tweety są przechowywane w dużej tabeli MySQL na moim laptopie

11Ciepło

1Odpowiedz

Czy istnieje sposób na załadowanie danych CSV do "binarnego" formatu Hive?

Zastanawiam się, czy istnieje jakikolwiek sposób, aby faktycznie załadować dane CSV do binarnego formatu Hive - tj. Robiąc to samo, co ładowanie danych w relacyjnej bazie danych: parsowanie i typ konw

6Ciepło

2Odpowiedz

Standardowe rozszerzenie pliku dla skryptu ulowego ddl?

Czy istnieje akceptowalna konwencja dotycząca rozszerzenia pliku skryptu dlyl ula? Pytam wyłącznie o cel organizacji kodu, więc kiedy zapisuję skrypt w moim repozytorium, jest oczywiste, że skrypt zna

6Ciepło

1Odpowiedz

zwalczaniu mapa i zmniejszyć postęp dla Hive odpytuje

Czy istnieje możliwość, aby stłumić mapę i zmniejszyć postęp w ulu zapytania, tj 2013-04-07 19:21:05,538 Stage-1 map = 13%, reduce = 4%, Cumulative CPU 28830.05 sec 2013-04-07 19:21:06,558 Stage-1 ma

8Ciepło

1Odpowiedz

Hadoop: wynik fsck pokazuje brakujące repliki

może ktoś dać mi znać, jak naprawić brakujące repliki? ============================================== ============================== Całkowity rozmiar: 3447348383 B Wszystkie katalogi: 120 Wszystkie p

15Ciepło

1Odpowiedz

W jaki sposób Hive wybiera liczbę reduktorów do pracy?

Kilka miejsc mówi, że domyślne # reduktorów w zadaniu Hadoop to 1. Możesz użyć symbolu mapred.reduce.tasks, aby ręcznie ustawić liczbę reduktorów. Kiedy uruchamiam zadanie Hive (na Amazon EMR, AMI 2.3

6Ciepło

1Odpowiedz

Jak odświeżyć/wyczyścić pamięć rozproszoną przy użyciu hue + wosku pszczelego Aby uruchomić kwerendy w ulu, które definiują niestandardowe funkcje UDF?

Ustawiłem klaster Hadoop (używając Cloudera distro przez Cloudera Managera) i uruchamiam kilka zapytań Hive używając interfejsu Hue, który używa wosku pszczelego pod spodem. Wszystkie moje zapytania d

9Ciepło

2Odpowiedz

Hive Query- Łączenie dwóch tabel na trzech warunków łączenia z lub operatora

Jestem stoi błąd „FAILED: Error in semantic analysis: Line 1:101 OR not supported in JOIN currently dob” podczas wykonywania niżej wymienionych zapytanie .. Insert Overwrite Local Directory './Insuran

18Ciepło

1Odpowiedz

Jak wybrać kolumnę i wykonać TRANSFORMę w Hive?

używałem TRANSFORM USING z Hive 0.8.1, i zauważyłem, że jest nieważny składnia: SELECT a, TRANSFORM(b, c) USING 'fake.py' AS d, FROM test_table; Usuwanie "a", czyni tę pracę oświadczenie.