org.apache.hadoop.mapreduce.counters.LimitExceededException: слишком много счетчиков: 121 max = 120

Я работаю над задницей (от oozie) у которого мало счетчиков и много выходов.

Я получаю сообщение об ошибке: org.apache.hadoop.mapreduce.counters.LimitExceededException: слишком много счетчиков: 121 max = 120

Затем я удалил весь код со счетчиками, а также установил для mout.setCountersEnabled значение false. А также установите максимальные счетчики на 240 в конфигурации hadoop.

Теперь я все еще получаю ту же ошибку org.apache.hadoop.mapreduce.counters.LimitExceededException: слишком много счетчиков: 241 макс = 240

Как я могу решить эту проблему? Есть ли вероятность, что существуют какие-то скрытые счетчики? Как я могу уточнить, какие счетчики там раньше превышают 240? (Процесс выглядит как остановленный, прежде чем я могу что-либо напечатать?)

Спасибо Синсун

Ответы на вопрос(2)

Ваш ответ на вопрос