mapreduce

8Ciepło

1Odpowiedz

Nie można uruchomić zadania MapReduce na hadoop 2.4.0

Jestem nowy w hadoop i tutaj jest mój problem. Skonfigurowałem hadoop 2.4.0 z jdk1.7.60 na klastrze z 3 komputerami. Jestem w stanie wykonać wszystkie polecenia z hadoop. Teraz mam zmodyfikowany przyk

6Ciepło

1Odpowiedz

Spark - Zdalne Akka Client Oddzielone

ja konfigurowania Spark 0.9 na AWS i jestem stwierdzenia, że przy uruchamianiu interaktywną Pyspark skorupę, moi wykonawcy/zdalne pracownicy uprzedniego zarejestrowany: 14/07/08 22:48:05 INFO cluste

5Ciepło

3Odpowiedz

Jak ustawić liczbę reduktorów w sposób dynamiczny w zależności od mojego rozmiaru wyjściowego mapera?

Wiem, że liczba programów odwzorowujących można ustawić na podstawie rozmiaru podzielonego pliku dfs, ustawiając mapred.min.split.size na dfs.block.size. Podobieństwo w jaki sposób ustawić I liczbę re

5Ciepło

1Odpowiedz

Różnica między HDFS i NFS?

Jestem początkującym w tym. Chciałbyś wiedzieć o podstawowych różnicach między rozproszonym systemem plików hadoop a systemem plików sieciowych i jakie są zalety hdfs przez nfs?

6Ciepło

3Odpowiedz

Przetwarzanie obrazów za pomocą hadoopu

Jestem nowy w hadoop i mam zamiar opracować aplikację, która przetwarza wiele obrazów za pomocą hadoop i pokazuje użytkownikom wyniki na żywo, podczas gdy obliczenia są w toku. Podstawowym podejściem

6Ciepło

2Odpowiedz

Hiveserver2 nie może pobrać wyniku zapytania ze zdalnego połączenia

Witam Mam do czynienia z problemem podczas próby pobrania danych ze zdalnego klastra hadoop przy użyciu hiveserver2. Połączenie JDBC pracuje w tym sensie, że meta wyszukiwania danych, takich jak show

5Ciepło

3Odpowiedz

Niepowodzenie zadania związanego z mapowaniem po przesłaniu go z komputera z systemem Windows

Próbuję przesłać zadanie M/R z komputera z systemem Windows do klastru hadoop na Linuksie. Używam hadoop 2.2.0 (HDP 2.0). otrzymuję następujący błąd: 2014-06-06 08:32:37,684 [main] INFO Job.monitorAnd

7Ciepło

3Odpowiedz

Yarn JobHistory Błąd: Nie udało przekierowanie do container_1400260444475_3309_01_000001

My MR praca wykonywana jest z powodzeniem .Ale kiedy jestem sprawdzenie jego historii dostaniem błąd jako: Failed redirect for container_1400260444475_3309_01_000001 Failed while trying to construct

8Ciepło

3Odpowiedz

Grupowanie Java od jednego do wielu

Chcę nauczyć się używać składni Java 8 ze strumieniami i utknąłem. Łatwo jest zgrupować, gdy masz jeden klucz dla każdej wartości. Ale co jeśli mam listę kluczy dla każdej wartości i nadal chcę je zak

9Ciepło

2Odpowiedz

Możliwe jest uruchomienie instancji osadzonej węzła Apache Spark?

Chcę uruchomić wystąpienie samodzielnego klastra Apache Spark wbudowanego w moją aplikację java. Próbowałem znaleźć dokumentację na ich stronie, ale jeszcze nie wyglądam. Czy to możliwe?