Изменение коэффициента репликации HDFS

Если коэффициент репликации в кластере изменяется, скажем, с 5 до 3 и кластер перезапускается, что происходит со старыми файловыми блоками? Будут ли они считаться слишком реплицированными и удаляться, или коэффициент репликации будет применяться ...

Кафка Storm HDFS / S3 поток данных

Неясно, можете ли вы сделать разветвление (дублирование) в Kafka, как в Flume. Я бы хотел, чтобы Кафка сохранил данные в HDFS или S3 и отправил дубликат этих данных в Storm для обработки в реальном времени. Выходные данные агрегации / анализа ...

hadoop getmerge на другую машину

Можно ли сохранить выходные данные

узел данных hdfs отключен от namenode

Приемник Flume HDFS постоянно катит небольшие файлы

Я пытаюсь транслировать данные из твиттера в hdfs, используя flume, и это:https://github.com/cloudera/cdh-twitter-example/Что бы я ни пытался здесь, он продо...

Почему блок в HDFS такой большой?

Почему «hadoop fs -mkdir» завершается ошибкой с отказом в доступе?

Порт Namenode HDFS по умолчанию - 50070. Но я сталкивался в некоторых местах 8020 или 9000

Когда я настраиваю кластер hadoop, я читаю, что namenode работает на 50070, и я настраиваюсь соответственно, и он работает нормально.Но в некоторых книгах я ...

pandas pytables append: производительность и увеличение размера файла

У меня больше 500

Добавить данные в существующий файл в HDFS Java

У меня проблемы с добавлением данных в существующий файл в HDFS. Я хочу, чтобы, если файл существует, добавьте строку, если нет, создайте новый файл с указан...