Результаты поиска по запросу "hadoop"
чтение и запись из таблиц улья с искрой после агрегации
У нас есть склад улья, и мы хотели использовать искру для различных задач (в основном, для классификации). Время от времени запишите результаты в виде таблиц...
Можно ли загрузить паркетный стол прямо из файла?
Если у меня есть файл двоичных данных (он может быть преобразован в формат CSV), есть ли способ загрузить таблицу паркет непосредственно из него? Многие учеб...
Ошибка Apache Spark: не удалось подключиться к akka.tcp: // sparkMaster @
Это наши первые шаги с использованием таких больших данных, как apache spark и hadoop.У нас установлен Cloudera CDH 5.3. Из менеджера Cloudera мы решили уста...
Как добавить внешний JAR для Hadoop Job?
У меня есть работа Hadoop, в которой картограф должен использовать внешнюю банку.Я пытался передать эту банку JVM картографачерез аргумент -libjars в команде...
Как открыть / поток .zip файлов через Spark?
У меня есть zip-файлы, которые я хотел бы открыть через Spark. Я могу открыть файл .gzip без проблем из-за поддержки родного кодека Hadoops, но не могу сдела...
Что такое память, зарезервированная на пряже
Мне удалось запустить искровое приложение на Yarn. Однако использование emory довольно странно, как вы можете видеть ниже:http://imgur.com/1k6VvSIЧто означае...
REGEXP_REPLACE захват групп
Мне было интересно, может ли кто-нибудь помочь мне понять, как использовать функцию regexp_replace в Hive для захвата групп в регулярном выражении и использо...
Узел / hbase не находится в ZooKeeper
Я новичок в Hadoop, пытаюсь установить Hbase в псевдораспределенном режиме, версия hbase-0.98.10.1-hadoop1-bin, с Hadoop 2.5.2. Я не могу добавить таблицу.Сл...
Цикл по каталогам hdfs
Моя структура каталогов HDFS выглядит следующим образом./user/hive/warehouse/check.db/abcd/date=2015-02-02/xyz=hijk/000000_0 /user/hive/warehouse/check.db/ab...