Результаты поиска по запросу "hadoop"
Получение cascading.tap.hadoop.io.MultiInputSplit класс не найден исключение при запуске программы hadoop с использованием каскадной инфраструктуры
Вот мой код, который подключается к машине hadoop и выполняет проверку и запись в другой каталог. public class Main{ public static void main(String...strings){ System.setProperty("HADOOP_USER_NAME", "root"); String in1 ...
Разница между искровыми векторами и неизменным вектором scala?
Я пишу проект для Spark 1.4 в Scala и в настоящее время преобразую исходные входные данные в
паркет без формата
ользуюИскровым Java. Мне нужно знать, есть ли разница (производительность и т. Д.) Между следующими методами записи в Hadoop: ds.write().mode(mode).format("orc").save(path);Или же ds.write().mode(mode).orc(path);Благодарю.
Простой пример улейного запроса?
Я пытаюсь преобразовать простой рабочий процесс в oozie. Я попытался просмотреть примеры слизи, но они немного перегружены. По сути, я хочу выполнить запрос ...
Подводя итог, загрузите данные в inpath и укажите кусту, где искать входные файлы, а ключевое слово LOCATION указывает кусту, где сохранять выходные файлы в HDFS.
олагая, что у меня есть эти две таблицы: внешний: create external table emp_feedback ( emp_id int, emp_name string ) LOCATION '/user/hive/warehouse/mydb.db/contacts';внутренний: create table emp_feedback ( emp_id int, emp_name string ) LOAD ...
Как сериализовать объект в hadoop (в HDFS)
У меня есть HashMap <String, ArrayList <Integer>>. Я хочу сериализовать мой объект HashMap (hmap) в расположение HDFS, а затем десериализовать ег...
Hbase внезапно попытался подключиться к локальному хосту вместо кворума zookeeper
Я проводил некоторые тесты с таблицами картографов и редукторов для крупномасштабных задач. После определенного момента мои редукторы начали выходить из стро...
hadoop getmerge на другую машину
Можно ли сохранить выходные данные
Более эффективный запрос, чтобы избежать OutOfMemoryError в Hive
Я получаю java.lang.OutOfMemoryError: превышен предел накладных расходов GC в Hive. В поиске я обнаружил, что это происходит потому, что 98% всего процессорн...