Результаты поиска по запросу "hdfs"
Получить несколько строк данных HDFS
У меня есть2 GB данные в моемHDFS. Можно ли получить эти данные случайно. Как мы делаем в командной строке Unix cat iris2.csv |head -n 50
Как использовать Hive без hadoop
Я новичок в NoSQL решениях и хочу поиграть с Hive. Но установка HDFS / Hadoop занимает много ресурсов и времени (возможно, без опыта, но у меня нет времени, чтобы сделать это). Есть ли способы установить и использовать Hive на локальном ...
Есть ли эквивалент в `pwd` в hdfs?
Я пытался сделатьhdfs dfs -pwd, но эта команда не существует. Так что в настоящее время я прибегаю кhdfs dfs -ls .. с последующимhdfs dfs -ls ../... Я также посмотрел на список команд дляhdfs dfs но не увидел ничего, что выглядело ...
Hadoop DFS репликации
Извините, ребята, просто простой вопрос, но я не могу найти точный вопрос в Google. Вопрос о том, что означает dfs.replication? Если я сделал один файл с именем filmdata.txt в hdfs, если я установил dfs.replication = 1, то будет ли это полностью ...
Проблема с плагином Eclipse Hadoop (Call to localhost / 127.0.0.1: 50070) Может ли какой-нибудь орган дать мне решение для этого?
Проблема: проблема с плагином Eclipse Hadoop (Ошибка вызова localhost / 127.0.0.1: 50070 при локальном исключении: java.io.EOFException). Может ли какой-нибудь орган дать мне решение для этого? У меня учебное пособие по Cloudera. В которой ...
Как установить объект в качестве значения для вывода карты в Hadoop MapReduce?
В Hadoop MapReduce для промежуточного вывода (генерируемого картой ()) я хочу, чтобы значением для промежуточного вывода был следующий объект. MyObject{ date:Date balance:Double }Как бы я это сделал? Должен ли я создать свой собственный ...
Использование HDFS Sink и rollInterval во Flume-ng для сбора 90 секунд информации журнала
Я пытаюсь использовать Flume-ng, чтобы получить 90 секунд информации журнала и поместить ее в файл в HDFS. У меня есть работа, чтобы посмотреть файл журнала через exec и tail, но он создает файл каждые 5 секунд вместо того, что я ...
Hadoop HDFS: чтение файлов последовательности, которые записываются
Я использую Hadoop 1.0.3. Я записываю журналы в файл последовательности Hadoop в HDFS, я вызываю syncFS () после каждой группы журналов, но я никогда не закрываю файл (за исключением случаев, когда я выполняю ежедневное обновление). То, что я ...
Изменение размещения стратегии блокирования HDFS
Я хотел бы изменить стратегию размещения блока по умолчанию в HDFS, чтобы удовлетворить мое заявление. Например, у меня есть два файла сказать file1 (128 Мб) и file2 (128 МБ). Имея размер блока как 64Мб, каждый из файлов будет разделен на два ...
dfs.namenode.servicerpc-address или dfs.namenode.rpc-address не настроен
Я пытался настроить hadoop с одним узлом имени и четырьмя узлами данных. Мне удалось успешно настроить узел имен и систему отслеживания заданий на одном компьютере и запустить его. Но на моей машине, где должен быть сконфигурирован узел данных, ...