Результаты поиска по запросу "hadoop"

2 ответа

Получение cascading.tap.hadoop.io.MultiInputSplit класс не найден исключение при запуске программы hadoop с использованием каскадной инфраструктуры

Вот мой код, который подключается к машине hadoop и выполняет проверку и запись в другой каталог. public class Main{ public static void main(String...strings){ System.setProperty("HADOOP_USER_NAME", "root"); String in1 ...

1 ответ

Разница между искровыми векторами и неизменным вектором scala?

Я пишу проект для Spark 1.4 в Scala и в настоящее время преобразую исходные входные данные в

1 ответ

 паркет без формата

ользуюИскровым Java. Мне нужно знать, есть ли разница (производительность и т. Д.) Между следующими методами записи в Hadoop: ds.write().mode(mode).format("orc").save(path);Или же ds.write().mode(mode).orc(path);Благодарю.

ТОП публикаций

1 ответ

Простой пример улейного запроса?

Я пытаюсь преобразовать простой рабочий процесс в oozie. Я попытался просмотреть примеры слизи, но они немного перегружены. По сути, я хочу выполнить запрос ...

1 ответ

Карта Уменьшить клиентские jar для 2.4.1 hadoop в eclipse

Когда я бегу

2 ответа

Подводя итог, загрузите данные в inpath и укажите кусту, где искать входные файлы, а ключевое слово LOCATION указывает кусту, где сохранять выходные файлы в HDFS.

олагая, что у меня есть эти две таблицы: внешний: create external table emp_feedback ( emp_id int, emp_name string ) LOCATION '/user/hive/warehouse/mydb.db/contacts';внутренний: create table emp_feedback ( emp_id int, emp_name string ) LOAD ...

1 ответ

Как сериализовать объект в hadoop (в HDFS)

У меня есть HashMap <String, ArrayList <Integer>>. Я хочу сериализовать мой объект HashMap (hmap) в расположение HDFS, а затем десериализовать ег...

3 ответа

Hbase внезапно попытался подключиться к локальному хосту вместо кворума zookeeper

Я проводил некоторые тесты с таблицами картографов и редукторов для крупномасштабных задач. После определенного момента мои редукторы начали выходить из стро...

1 ответ

hadoop getmerge на другую машину

Можно ли сохранить выходные данные

2 ответа

Более эффективный запрос, чтобы избежать OutOfMemoryError в Hive

Я получаю java.lang.OutOfMemoryError: превышен предел накладных расходов GC в Hive. В поиске я обнаружил, что это происходит потому, что 98% всего процессорн...