В идеале, даже если это не правильный способ сделать что-то в слизи. Ваш ответ работает на стороне сценариев оболочки Linux. Спасибо за ваш ответ

Как настроить рабочий процесс oozie для нескольких входных путей с несколькими мапперами

Может ли кто-нибудь помочь мне в настройке рабочего потока с помощью действия Map-Reduce, которое принимает несколько входных путей, каждый входной путь связан с одним Mapper, как, например, MultipleInputs.addInputPath api принимает входной путь ...

org.apache.hadoop.mapreduce.counters.LimitExceededException: слишком много счетчиков: 121 max = 120

Я запускаю задание hadoop (из oozie), в котором мало счетчиков и много выходов. Я получаю сообщение об ошибке: org.apache.hadoop.mapreduce.counters.LimitExceededException: слишком много счетчиков: 121 max = 120 Затем я удалил весь код со ...

Запуск сценария оболочки с Oozie

Я пытаюсь запуститьsh Скрипт через Oozie, но я столкнулся с проблемой: Невозможно запустить программу "script.sh" (в каталоге "/ mapred / local / taskTracker / dell / jobcache / job_201312061003_0001 / try_201312061003_0001_m_000000_0 / work"): ...

Переопределить mapreduce.fileoutputcommitter.marksuccessfuljobs hadoop в oozie

<property> <name>mapreduce.fileoutputcommitter.marksuccessfuljobs</name> <value>false</value> </property>Я хочу переопределить указанное выше свойство на true. Это свойство должно быть ложным для остальных заданий в кластере, но мне нужно, чтобы ...

Рабочий процесс Oozie: таблица Hive не найдена, но она существует

Я получил рабочий процесс oozie, работающий на кластере CDH4 из 4 машин (один мастер на все, три «тупых» работника). Метасольва кустов запускается на главном сервере с использованием mysql (драйвер присутствует), сервер oozie также работает на ...