Wyniki wyszukiwania dla "mapreduce"

4 odpowiedź

MRUnit z Avro NullPointerException w serializacji

Próbuję przetestować zadanie Hadoop .mapreduce Avro za pomocą MRUnit. Otrzymuję wyjątek NullPointerException, jak pokazano poniżej. Dołączyłem część pom i ko...

2 odpowiedź

Zmniejszenie nie powiodło się z powodu próby zadania nie zgłosiło statusu przez 600 sekund. Zabicie! Rozwiązanie?

Faza redukcji zadania kończy się niepowodzeniem:nie powiodło się Zmniejsz zadania przekroczył dozwolony limit.Przyczyną niepowodzenia każdego zadania jest:Za...

5 odpowiedzi

Jakie są scenariusze, dla których MPI jest lepiej dopasowane niż MapReduce?

O ile mi wiadomo, MPI daje mi znacznie większą kontrolę nad tym, jak dokładnie będą komunikować się różne węzły w klastrze.W MapReduce / Hadoop każdy węzeł w...

4 odpowiedź

Suma kontrolna Wyjątek podczas odczytu lub kopiowania do hdfs w apache hadoop

Próbuję zaimplementować równoległy algorytm przy użyciu hadoop Apache, jednak napotykam pewne problemy przy próbie przeniesienia pliku z lokalnego systemu pl...

0 odpowiedzi

Przesunięcie bajtu mapowania strumieniowego Hadoop nie jest generowane

Używam zadania strumieniowania Hadoop, a przesunięcia bajtów nie są generowane jako dane wyjściowe (klucze) programu odwzorowującego, tak jak ja też tego ocz...

3 odpowiedź

java.sql.SQLException: Nie można uruchomić bazy danych 'metastore_db' BŁĄD, podczas inicjowania bazy danych przy użyciu gałęzi

Zainstalowałem Hadoop i Hive na 3 klastrze. Mogłem się zalogować do gałęzi z mojego węzła klastra, w którym działa HIVE.root @ NODE_3 hive] # hive Logowanie ...

1 odpowiedź

Wysyłanie listy z mapy Hadoop Zmniejsz zadanie za pomocą niestandardowego zapisu

Próbuję utworzyć prostą mapę, zmniejszając zadanie, zmieniając przykład liczby słów podany przez hadoop.Próbuję wymyślić listę zamiast liczby słów. Przykład ...

1 odpowiedź

Wiele ścieżek wyjściowych (Java - Hadoop - MapReduce)

Wykonuję dwa zadania MapReduce i chcę, aby drugie zadanie mogło zapisać mój wynik w dwóch różnych plikach, w dwóch różnych katalogach. Chciałbym coś podobneg...

2 odpowiedź

Jak klient zadania w hadoop oblicza dane wejściowe

Próbuję uzyskać wgląd w architekturę zmniejszania mapy. Konsultuję tohttp://answers.oreilly.com/topic/2141-how-mapreduce-works-with-hadoop/ artykuł. Mam kilk...

1 odpowiedź

Przykład Hadoop WordCount - opcja Run On Hadoop (Eclipse) nie monituje Wybierz serwer Hadoop do uruchomienia w oknie

Próbuję uruchomić przykładową liczbę słówZaćmienie. Ogólnie, gdy klikniemy opcję „uruchom na hadoop” w eclipse, otrzymamy nowe okno z prośbą o wybranie lokal...