Jak zaplanować zadania mapy Hadoop w wielordzeniowym klastrze 8 węzłów?

Mam program „tylko mapa” (faza bez redukcji). Rozmiar pliku wejściowego jest wystarczająco duży, aby utworzyć 7 zadań mapowych i zweryfikowałem to, patrząc n...

Wyszukiwanie dokumentów przechowywanych w Hadoop - które narzędzie użyć?

Zgubiłem się w: Hadoop, Hbase, Lucene, Carrot2, Cloudera, Tika, ZooKeeper, Solr, Katta, Kaskadowanie, POI ...Kiedy czytasz o tym, możesz być często pewien, ż...

Hive External Table Skip First Row

Używam wersji Hive Cloudera i próbuję utworzyć tabelę zewnętrzną w pliku csv, który zawiera nazwy kolumn w pierwszej kolumnie. Oto kod, którego używam do tego.

Nie można zainicjować klastra. Sprawdź swoją konfigurację dla mapreduce.framework.name i odpowiadającego adresu serwera przesyłającego job2remoteClustr

Niedawno zaktualizowałem mój klaster z Apache Hadoop 1.0 do CDH4.4.0. Mam serwer weblogic na innej maszynie, z której przesyłam zadania do tego zdalnego klas...

Ustawienie fs.default.name w core-site.xml Ustawia HDFS na Safemode

Przepływ pracy Oozie: Nie znaleziono tabeli Hive, ale istnieje

Dostałem przepływ pracy oozie, działający na klastrze CDH4 złożonym z 4 maszyn (jeden master-for-everything, trzech „głupich” pracowników). Metastore ula dzi...

CDH4 Hbase przy użyciu Pig ERROR 2998 java.lang.NoClassDefFoundError: org / apache / hadoop / hbase / filter / Filter

Używam CDH4 w trybie pseudo-rozproszonym i mam problemy z pracą z HBase i Pig razem (ale oba działają dobrze same).Śledzę krok po kroku ten miły poradnik:htt...

Nie ładuje się zmiennych środowiskowych serwera RStudio?

Apache Pig: Załaduj plik, który pokazuje, jak dobrze używać hadoop fs -text

Mam pliki o nazwach part-r-000 [0-9] [0-9] i zawierające pola oddzielone tabulatorami. Mogę je zobaczyć używając

Nie można uruchomić demonów za pomocą start-dfs.sh

Używamy dystrybucji cdh4-0.0 z cloudera. Nie możemy uruchomić demonów za pomocą poniższego polecenia.