Результаты поиска по запросу "yarn"

0 ответов

Ошибка задания искры: YarnAllocator: Статус выхода: -100. Диагностика: контейнер освобожден на * потерянном * узле

2 ответа

Какая связь между «mapreduce.map.memory.mb» и «mapred.map.child.java.opts» в Apache Hadoop YARN?

Я хотел бы знать связь между

2 ответа

Отчет Spark Hive pyspark.sql.utils.AnalysisException: таблица не найдена: XXX 'при запуске на кластере пряжи

ТОП публикаций

3 ответа

Spark Launcher бесконечно ждет завершения работы

Я пытаюсь отправить JAR с заданием Spark в кластер YARN из кода Java. Я использую SparkLauncher для отправки примера SparkPi:

3 ответа

Как ограничить количество повторных попыток при сбое задания Spark?

1 ответ

Spark executor на yarn-client не принимает конфигурацию подсчета ядра исполнителя.

8 ответов

Apache Spark: количество ядер против количества исполнителей

Я пытаюсь понять взаимосвязь количества ядер и числа исполнителей при запуске задания Spark на YARN.Тестовая среда выглядит следующим образом:Количество узло...

5 ответов

Как я могу получить доступ к S3 / S3n из локальной установки Hadoop 2.6?

3 ответа

Запуск режима Apache Spark YARN занимает слишком много времени (10+ секунд)

4 ответа

Apache Spark: установка экземпляров исполнителей не меняет исполнителей

У меня есть приложение Apache Spark, работающее в кластере YARN (в этом кластере есть 3 узла), в режиме кластера.Когда приложение работает, Spark-UI показыва...