Результаты поиска по запросу "mapreduce"

3 ответа

Размер сплита против размера блока в Hadoop

Какова взаимосвязь между размером разделения и размером блока в Hadoop? Как я читаю вэтотразмер разбиения должен быть n-кратным размером блока (n - целое чис...

2 ответа

Класс не найден в работе Hadoop

У меня есть работа по уменьшению карты, которая получает информацию от DocumentDB. Я добавил файлы jar в директорию lib в своем исходном коде, а также исполь...

4 ответа

Какова цель «Uber Mode» в Hadoop?

Привет, я новичок с большими данными. Я искал по всему интернету, чтобы найти, что именно Uber Mode. Чем больше я искал, тем больше я запутался. Кто-нибудь м...

ТОП публикаций

1 ответ

Ошибка потоковой передачи в Python «ОШИБКА streaming.StreamJob: задание не выполнено!» И трассировка стека: ExitCodeException exitCode = 134

Я пытаюсь запустить скрипт Python на кластере Hadoop, используя Hadoop Streaming для анализа настроений. Тот же скрипт, который я запускаю на локальной машин...

2 ответа

Почему на YARN есть конфигурация mapreduce.jobtracker.address?

YARN - это второе поколение Hadoop, которое больше не использует демон jobtracker и заменяет его менеджером ресурсов. Но почему в mapred-site.xml hadoop 2 ес...

3 ответа

Не удалось найти или загрузить основной класс com.sun.tools.javac. Основной hadoop mapreduce

Я пытаюсь выучить MapReduce, но сейчас я немного растерялся.http://hadoop.apache.org/docs/r2.6.0/hadoop-mapreduce-client/hadoop-mapreduce-client-core/MapRedu...

4 ответа

(Hadoop) MapReduce - Цепочка заданий - JobControl не останавливается

Мне нужно связать два задания MapReduce. Я использовал JobControl, чтобы установить job2 как зависимую от job1. Работает, выходные файлы созданы !! Но это не...

1 ответ

Ключ типа объекта в преобразователе hadoop

Новое в hadoop и попытка понять пример кода mapreduce изВот.Картограф из документации -

1 ответ

MapReduce Output ArrayWritable

Я пытаюсь получить вывод из ArrayWritable в простой MapReduce-Task. Я нашел несколько вопросов с похожей проблемой, но я не могу решить проблему в своем собс...

3 ответа

Как добавить внешний JAR для Hadoop Job?

У меня есть работа Hadoop, в которой картограф должен использовать внешнюю банку.Я пытался передать эту банку JVM картографачерез аргумент -libjars в команде...