Результаты поиска по запросу "hadoop"

5 ответов

$ HADOOP_HOME устарела

Я начал кластер Hadoop. Я получаю это предупреждение:$HADOOP_HOME is deprecated Я уже добавляюexport HADOOP_HOME_WARN_SUPPRESS="TRUE" вhadoop-env.sh Когда я запустил кластер, я больше не вижу предупреждающего сообщения. Тем не менее, когда я ...

4 ответа

Hbase: как указать имя хоста для мастера Hbase

Я изо всех сил пытаюсь настроить распределенный кластер Hbase с 2 узлами, один - моя машина, а другой - виртуальная машина, используя адаптер «только для хоста» в VirtualBox. Моя проблема заключается в том, что региональный сервер (с компьютера ...

1 ответ

Сбой операции Hadoop Map-Reduce при записи вывода

Наконец-то я смог начать работу по уменьшению карты в Hadoop (на одном компьютере с Debian). Однако задание уменьшения карты всегда завершается с ошибкой: hadoopmachine@debian:~$ ./hadoop-1.0.1/bin/hadoop jar ...

ТОП публикаций

1 ответ

Hadoop: простой способ иметь объект в качестве выходного значения без интерфейса записи

Я пытаюсь использовать hadoop для обучения нескольких моделей. Мои данные достаточно малы, чтобы поместиться в памяти, поэтому я хочу обучить одну модель для каждой задачи карты. Моя проблема в том, что когда я закончу тренировать свою модель, ...

5 ответов

Как использовать Hive без hadoop

Я новичок в NoSQL решениях и хочу поиграть с Hive. Но установка HDFS / Hadoop занимает много ресурсов и времени (возможно, без опыта, но у меня нет времени, чтобы сделать это). Есть ли способы установить и использовать Hive на локальном ...

2 ответа

Улей не показывает таблицы

Я новичок в мире Hadoop и Hive. У меня странная проблема. Когда я работал над подсказкой улья. Я создал несколько таблиц, и улей показывал эти таблицы. После выхода из сеанса Hive, когда я снова запускаю терминал Hive, «покажите таблицы»; не ...

6 ответов

Есть ли эквивалент в `pwd` в hdfs?

Я пытался сделатьhdfs dfs -pwd, но эта команда не существует. Так что в настоящее время я прибегаю кhdfs dfs -ls .. с последующимhdfs dfs -ls ../... Я также посмотрел на список команд дляhdfs dfs но не увидел ничего, что выглядело ...

8 ответов

Hadoop java.io.IOException: Mkdirs не удалось создать / some / path

Когда я пытаюсь запустить свою работу, я получаю следующее исключение: Exception in thread "main" java.io.IOException: Mkdirs failed to create /some/path at org.apache.hadoop.util.RunJar.ensureDirectory(RunJar.java:106) ...

4 ответа

Hadoop DFS репликации

Извините, ребята, просто простой вопрос, но я не могу найти точный вопрос в Google. Вопрос о том, что означает dfs.replication? Если я сделал один файл с именем filmdata.txt в hdfs, если я установил dfs.replication = 1, то будет ли это полностью ...

1 ответ

Hadoop: номер редуктора не равен тому, что я установил в программе

Я установил mapred.tasktracker.reduce.tasks.maximum до 10 вmapred-site.xmlи я тоже пишуjobConf.setNumReduceTasks(5) в моей работе. Все хорошо, если я запускаю работу в Shell. Но когда я выполняю ту же работу по затмению, запускается только один ...