Результаты поиска по запросу "hdfs"
копирование каталога из локальной системы в jdf-код hdfs
У меня возникла проблема при попытке скопировать каталог из моей локальной системы в HDFS с использованием кода Java. Я'я могу перемещать отдельные файлы...
Hadoop 2.0 Name Node, Вторичный узел и узел Checkpoint для высокой доступности
После прочтения ApacheДокументация Hadoop , есть небольшая путаница в понимании обязанностей вторичного узла и узла контрольной точкиМне ясноNameNode роль и ...
Изменение размещения стратегии блокирования HDFS
Я хотел бы изменить стратегию размещения блока по умолчанию в HDFS, чтобы удовлетворить мое заявление. Например, у меня есть два файла сказать file1 (128 Мб) и file2 (128 МБ). Имея размер блока как 64Мб, каждый из файлов будет разделен на два ...
Надеюсь, это поможет!
аюсь настроить HDFS на мини-кубе (на данный момент), а затем на кластере DEV kubernetes, чтобы я мог использовать его со Spark. Я хочу, чтобы Spark запускался локально на моей машине, чтобы я мог работать в режиме отладки во время разработки, ...
Почему Dockerized Hadoop datanode регистрируется с неправильным IP-адресом?
У меня есть отдельные изображения Docker (1.9.1) для наменодов и датододов Hadoop (2.7.1). Я могу создавать контейнеры из них и передавать их через пользоват...
Несколько файлов хранятся в одном блоке?
Когда я сохраню много маленьких файлов в HDFS, они будут храниться в одном блоке? На мой взгляд, эти небольшие файлы должны храниться в одном блоке в соответствии с этим обсуждением:Размер блока HDFS против фактического размера ...