mapreduce

5Ciepło

2Odpowiedz

Struktury strumieniowe na górze Hadoop, które obsługują ORC, formaty plików parkietowych

Czy strumieniowanie Hadoop obsługuje nowe, kolumnowe formaty przechowywania, takie jak ORC i parkiet, czy też istnieją frameworki na platformie Hadoop, które umożliwiają czytanie takich formatów?

7Ciepło

3Odpowiedz

Jak zmniejszyć mapę AppEngine, aby zmniejszyć skalę?

Napisałem prosty przepływ MapReduce, aby odczytać w wierszach z pliku CSV z pliku w Google Cloud Storage, a następnie utworzyć Entity. Jednakże, wydaje mi się, że nie można go uruchomić na więcej niż

11Ciepło

2Odpowiedz

Najlepsze wartości N według mapy Hadoop Zredukuj kod

Jestem bardzo nowy w świecie hadoopów i staram się osiągnąć jedno proste zadanie. Czy ktokolwiek może mi powiedzieć, jak uzyskać górne n wartości dla przykładu liczby słów przy użyciu techniki Map red

14Ciepło

6Odpowiedz

YARN ResourceManager nie podłączenia do nodemanager

góry dzięki za wszelką pomoc Używam następujących wersjach: Hadoop 2.2 Heca 3.4.5 HBase 0,96 gałąź 0,12 Kiedy idę do http: //: 50070 Jestem w stanie poprawnie zobaczyć, że działają 2 węzły. Problem wy

8Ciepło

3Odpowiedz

Nie można znaleźć lub wczytać głównej klasy podczas próby sformatowania polecenia namenode; Instalacja Miaoop na MAC OS X 10.9.2

Próbuję uzyskać konfigurację klastra dla jednego węzła programistycznego na moim Mac OS X 10.9.2 z hadoop. Próbowałem różnych samouczków online, z których najnowszym jest this one. Podsumowując to, co

32Ciepło

8Odpowiedz

Jak uzyskać nazwę pliku wejściowego w programie odwzorowującym w programie Hadoop?

Jak mogę uzyskać nazwę pliku wejściowego w programie odwzorowującym? Mam wiele plików wejściowych przechowywanych w katalogu wejściowym, każdy program odwzorowujący może czytać inny plik i muszę wiedz

8Ciepło

6Odpowiedz

Nie można zainicjować klastra. Sprawdź swoją konfigurację pod kątem pliku mapreduce.framework.name i odpowiadającego adresu serwera wysyłającego zadanie2remoteClustr

Niedawno zaktualizowałem mój klaster z Apache Hadoop1.0 do CDH4.4.0. Mam serwer WWW w innym komputerze, z którego wysyłam zadania do tego zdalnego klastra za pomocą klienta mapreduce. Nadal chcę używa

5Ciepło

1Odpowiedz

Harmonogram zadań i zadań W Hadoop

Jestem trochę zdezorientowany terminami "Planowanie zadań" i "Planowanie zadań" w Hadoop, kiedy czytałem o opóźnionym harmonogramie targów in this slide. Proszę mnie poprawić jeśli się mylę w moich na

6Ciepło

2Odpowiedz

Różnice między istniejącymi MapReduce i YARN (MRv2)

Czy ktoś mógłby mi powiedzieć, jakie są różnice między istniejącymi MapReduce i YARN, ponieważ nie znajduję wszystkich wyraźnie różnic między tymi dwoma? P.S: Proszę o coś podobnego do porównania międ

5Ciepło

5Odpowiedz

Mapa zmniejsza ilość utknięć na mapie 0% zmniejsza 0%

Używam słynnego przykładu wordcount. Mam lokalną i prodową konfigurację hadoopów. Ten sam przykład działa w prod, ale nie działa lokalnie. Czy ktoś może mi powiedzieć, czego mam szukać? Praca się zaci