Результаты поиска по запросу "hadoop"

3 ответа

рекурсивное чтение всех файлов из HDFS в spark java api

3 ответа

http://sanketraut.blogspot.in/2012/06/hadoop-example-setting-up-hadoop-on.html

но я начал использовать Hadoop, и у меня возникла проблема при использовании Mapfile в качестве входных данных для задания MapReduce. В следующем рабочем коде записывается простой MapFile с именем «TestMap» в hdfs, в котором есть три ключа типа ...

7 ответов

Свинья против Улья против Родной Карты Уменьшить

У меня есть общее представление о том, что такое абстракции Свинья, Улей. Но я не имею четкого представления о сценариях, которые требуют уменьшения Hive, Pig или native map. Я просмотрел несколько статей, в которых в основном говорится, что ...

ТОП публикаций

4 ответа

Hadoop: предоставить каталог в качестве входных данных для задания MapReduce

м с помощью Cloudera Hadoop. Я'я могу запустить простую программу mapreduce, где я предоставляю файл в качестве входных данных для программы MapReduce.Эт...

5 ответов

Как использовать hbase с Spring Boot, используя Java вместо XML?

2 ответа

hadoop: задачи не локальные с файлом?

Я выполнил задание hadoop, и когда я смотрю на некоторые задачи карты, я вижу, что они не работают там, где файл 'с блоками. Например, задача map выполня...

1 ответ

Задание пределов памяти с помощью hadoop

Я пытаюсь запустить задание с высокой памятью в кластере Hadoop (0.20.203). Я изменил mapred-site.xml, чтобы применить некоторые ограничения памяти. <property> <name>mapred.cluster.max.map.memory.mb</name> <value>4096</value> </property> ...

2 ответа

Пропустить первую строку CSV при загрузке в таблице улья

Здравствуйте друзья,Я создал таблицу в улье с помощью следующей команды -

3 ответа

Как объединить группу в один кортеж в Pig?

Из этого: (1, {(1,2), (1,3), (1,4)} ) (2, {(2,5), (2,6), (2,7)} )... Как мы могли создать это? ((1,2),(1,3),(1,4)) ((2,5),(2,6),(2,7))... И как мы могли это сгенерировать? (1, 2, 3, 4) (2, 5, 6, 7)Для одного ряда я знаю, как это сделать. ...

5 ответов

Знает ли главный узел EMR свой идентификатор кластера?

Я хочу иметь возможность создавать кластеры EMR и отправлять сообщения в какую-то центральную очередь для этих кластеров. Чтобы это работало, мне нужно, чтоб...