Результаты поиска по запросу "hadoop"

1 ответ

Вот пример запроса Hive, который я выполняю. Вы можете видеть здесь 2 броска:

аюсь создать своего рода конвейер данных для переноса моих таблиц Hive в BigQuery. Hive работает на кластере Hadoop. Это мой текущий дизайн, на самом деле, это очень просто, это всего лишь сценарий оболочки: для каждой таблицы source_hive_table ...

3 ответа

Ошибка CLASSPATH в Hadoop на Cygwin при выполнении команды «версия hadoop»

Я установил бета-версию Hadoop 2.1 от Apache на Windows, используя терминал Cygwin. Выполнение командыhadoop version получает мне эту ошибку: Error: Could not find or load main class org.apache.hadoop.util.VersionInfo

3 ответа

Это шоуд работа

аюсь создать или открыть файл для хранения некоторого вывода в HDFS, но я получаю исключение NullPointerException при вызовеexists метод от второй до последней строки фрагмента кода ниже: DistributedFileSystem dfs = new DistributedFileSystem(); ...

ТОП публикаций

1 ответ

@ayushnigam Я изменил свой ответ на основе вашего ответа.

аюсь подключиться к Hive-Server2 через JDBC. Сервер включен Kerberos. Я использую следующий код, я запускаю код пограничного узла, где присутствует файл keytab Чего мне не хватает? import org.apache.hadoop.security.UserGroupInformation; public ...

2 ответа

это смешно, но это была точка, в которой я застрял на 2 целых дня

аюсь выполнить задание Map-Reduce для потоковой передачи Hadoop со скриптами Python и получаю те же ошибки, что иОшибка потокового задания Hadoop в ...

1 ответ

 в

я выполняю следующий запрос, я получаю только один файл, хотя у меня есть 8 картографов и 0 редукторов. create table table_2 as select * from table_1.Вызывается 8 картографов, и фаза редуктора отсутствует. В таблице table_2 находится только ...

3 ответа

http://sanketraut.blogspot.in/2012/06/hadoop-example-setting-up-hadoop-on.html

но я начал использовать Hadoop, и у меня возникла проблема при использовании Mapfile в качестве входных данных для задания MapReduce. В следующем рабочем коде записывается простой MapFile с именем «TestMap» в hdfs, в котором есть три ключа типа ...

2 ответа

@shrewquest - Обновлен ответ методом 2, который не требует изменений в ваших данных. надеюсь это поможет!

аюсь импортировать данные в следующем формате в таблицу кустов [ { "identifier" : "id#1", "dataA" : "dataA#1" }, { "identifier" : "id#2", "dataA" : "dataA#2" } ]У меня есть несколько таких файлов, и я хочу, чтобы каждый {} формировал одну строку ...

4 ответа

Hadoop: предоставить каталог в качестве входных данных для задания MapReduce

Я использую Cloudera Hadoop. Я могу запустить простую программу mapreduce, где я предоставляю файл в качестве входных данных для программы MapReduce. Этот файл содержит все остальные файлы, которые будут обработаны функцией mapper. Но я застрял ...

2 ответа

Пропустить первую строку CSV при загрузке в таблице улья

Здравствуйте друзья, Я создал таблицу в улье с помощью следующей команды - CREATE TABLE db.test ( fname STRING, lname STRING, age STRING, mob BIGINT ) row format delimited fields terminated BY '\t' stored AS textfile;Теперь, чтобы загрузить ...