Как определить размер моих таблиц HBase? Есть ли команда, чтобы сделать это?

У меня есть несколько таблиц в моей оболочке Hbase, которые я хотел бы скопировать в мою файловую систему. Некоторые таблицы превышают 100 ГБ. Однако в моей ...

Ошибка куста Apache Слияние учетных данных, не поддерживаемых в этой версии hadoop

Я использую hadoop 1.2.1, hbase 0.94.14 и улей 1.0.0. В моем кластере также есть три датододы и три региональных сервера. Я должен импортировать некоторые да...

используя pyspark, считывайте и записывайте 2D-изображения в файловой системе hadoop

Я хочу иметь возможность читать / писать изображения в файловой системе hdfs и использовать преимущества hdfs.У меня есть коллекция изображений, где каждое и...

Как я могу сделать новый каталог в hdfs с Java?

Какой лучший способ подсчета уникальных посетителей с Hadoop?

Привет всем, только начинаю работать с hadoop и любопытно, как лучше всего было бы подсчитать уникальных посетителей в mapreduce, если бы ваши лог-файлы выгл...

Билайн не может подключиться к hiveserver2

У меня есть экземпляр CDH 5.3. Я запускаю hive-server2, сначала запустив hive-metastore, а затем hive-server из командной строки. После этого я использую bee...

MapReduce Output ArrayWritable

Я пытаюсь получить вывод из ArrayWritable в простой MapReduce-Task. Я нашел несколько вопросов с похожей проблемой, но я не могу решить проблему в своем собс...

Авро против Паркет

Spark Streaming: HDFS

Я не могу получить задание Spark для потоковой передачи «старых» файлов из HDFS.Если по какой-то причине мое задание Spark не работает (например, демонстраци...

Ключ типа объекта в преобразователе hadoop

Новое в hadoop и попытка понять пример кода mapreduce изВот.Картограф из документации -