Доступ к файлам в HDFS с использованием Java

Я пытаюсь получить доступ к файлу в HDFS с помощью API Java, но каждый раз получаю файл не найден. Код, который я использую для доступа: Configuration conf = new Configuration(); conf.addResource(FileUtilConstants.ENV_HADOOP_HOME ...

Добавить данные в существующий файл в HDFS Java

У меня проблемы с добавлением данных в существующий файл в HDFS. Я хочу, чтобы, если файл существует, добавьте строку, если нет, создайте новый файл с указан...

Опыт работы с Hadoop?

Кто-нибудь из вас пробовал Hadoop? Может ли он использоваться без распределенной файловой системы, которая идет с ним, в архитектуре без совместного использования? Будет ли это иметь смысл? Я также заинтересован в любых результатах ...

Как транспонировать / сводить данные в улье?

Hive Table возвращает пустой набор результатов по всем запросам

Где узел Name хранит fsImage и редактирует журнал?

Я программист Java, изучаю Hadoop. Я прочитал, что узел Name в HDFS хранит свою информацию в двух файлах, а именно fsImage & editLog. В случае запуска он...

Как мне запустить graphx с Python / pyspark?

Я пытаюсь запустить Spark graphx с Python, используя pyspark. Моя установка кажется правильной, так как я в состоянии запустить учебники pyspark и (Java) Gra...

Программа Wordcount застряла в hadoop-2.3.0

Я установил hadoop-2.3.0 и попытался запустить пример wordcount Но он запускает работу и бездействует

Чтение удаленного файла HDFS с помощью Java

У меня небольшие проблемы с простой установкой Hadoop. Я скачал hadoop 2.4.0 и установил его на одном узле CentOS Linux (виртуальная машина). Я настроил hado...

Hadoop 2.4 Не удалось выполнить цель org.apache.maven.plugins: maven-antrun-plugin: 1.7

Я пытаюсь установить Hadoop 2.4.0 из источника, я получил следующую ошибку, я погуглил, но не могу найти никакого решения.Пожалуйста помоги.С уважениемO / S ...