hadoop

10Ciepło

4Odpowiedz

Google Analytics - Pobieranie nieprzetworzonych dzienników danych

Mam aplikację, która przesyła dane do Google Analytics. Jestem zainteresowany dostępem i przechowywaniem tych danych w klastrze Hadoop. Zgaduję, że te surowe dane będą miały postać dzienników. W szcze

6Ciepło

2Odpowiedz

Jak wyciszyć komunikaty diagnostyczne Apache'a zookeepera (AWS EMR)?

Jak wyciszyć komunikaty DEBUG na węźle AWS Elastic MapReduce? hbase(main):003:0> list TABLE mydb 1 row(s) in 0.0510 seconds hbase(main):004:

9Ciepło

2Odpowiedz

dostęp do pliku, który jest napisany

You use the hadoop fs –put command to write a 300 MB file using and HDFS block size of 64 MB. Just after this command has finished writing 200 MB of this file, what would another user see when trying

15Ciepło

2Odpowiedz

Spark: uruchom InputFormat jako singleton

Próbuję zintegrować bazę danych klucz-wartość ze Sparkiem i mam kilka pytań. Jestem początkującym Sparkiem, dużo czytałem i przeprowadzam kilka sampli, ale nic nie jest tak złożone, jak . Scenariusz:

5Ciepło

1Odpowiedz

Czym różni się serwer Ambari Apache od agenta

Jaka jest różnica między serwerem Apache Ambari a agentem? Jaka jest rola \ zadania serwera kontra agent?

6Ciepło

2Odpowiedz

Niewłaściwy słoik podczas uruchamiania zadania Hadoop

Chcę uruchomić przykład WordCount. W czasie zaćmienia działa poprawnie. W folderze wyjściowym obecny jest plik wyjściowy. Zrobiłem plik słoik WordCount i chcesz go uruchomić poprzez komendy hadoop jar

5Ciepło

1Odpowiedz

ula zewnętrzny podzielono stół

pierwszy stworzony ula tabeli zewnętrznej partycje za pomocą kodu i daty CREATE EXTERNAL TABLE IF NOT EXISTS XYZ ( ID STRING, SAL BIGINT, NAME STRING, ) PARTITIONED BY (CODE INT,DATE STRING) RO

5Ciepło

5Odpowiedz

Ustawianie zewnętrznych słoików na ścieżkę klasy miaoopu

Próbuję ustawić zewnętrzne słoiki na ścieżkę klasy miaoop, ale niestety nie ma to szczęścia. Mam następujące ustawienia $ hadoop version Hadoop 2.0.6-alpha Subversion https://git-wip-us.apache.org/rep

5Ciepło

4Odpowiedz

Czy Hive może rekurencyjnie zejść do podkatalogów bez partycji lub edytować plik hive-site.xml?

Mam kilka dzienników serwera WWW, które chciałbym wysłać do Hive. Struktura katalogów, w HDFS, wygląda następująco: /data/access/web1/2014/09 /data/access/web1/2014/09/access-20140901.log [... etc .

7Ciepło

1Odpowiedz

Spark nie może już wykonywać zadań. Executory nie tworzą katalogu

Od miesiąca mamy mały klaster iskier, który pomyślnie wykonał zadania lub pozwolił mi uruchomić powłokę iskrową w klastrze. Nie ma znaczenia, że przesyłam zadanie do klastra lub łączę się z nim za p