Spark Indefinite Waiting с «Запрошено отправить выходные данные карты для перемешивания»

Моя работа часто зависает от такого рода сообщений:

Запуск Spark на YARN в режиме кластера пряжи: Куда идет вывод консоли?

Я проследовал за этой страницей и запустил пример приложения SparkPi на YARN в режиме кластера пряжи.http://spark.apache.org/docs/latest/running-on-yarn.html...

Как установить VCORES в hadoop mapreduce / yarn?

Любая команда, чтобы получить активный namenode для службы имен в hadoop?

Hadoop 2.6.0: Основная ошибка «запуска MRAppMaster» после установки

Я только начал работать с Hadoop 2.После установки с базовыми конфигами мне всегда не удавалось запустить какие-либо примеры. Кто-нибудь видел эту проблему и...

Ресурсы / Документация о том, как работает процесс аварийного переключения для драйвера Spark (и его контейнера YARN) в режиме кластера пряжи

Как я могу получить доступ к S3 / S3n из локальной установки Hadoop 2.6?

Что такое память, зарезервированная на пряже

Мне удалось запустить искровое приложение на Yarn. Однако использование emory довольно странно, как вы можете видеть ниже:http://imgur.com/1k6VvSIЧто означае...

Какой тип кластера мне выбрать для Spark?

Я новичок в Apache Spark, и я только что узнал, что Spark поддерживает три типа кластеров:Автономный - это означает, что Spark будет управлять своим собствен...

Почему Hadoop сообщает «Неверные локальные каталоги и лог-каталоги нездорового узла»?

Я пытаюсь настроить на своем компьютере кластер Hadoop 2.6.0 с одним узлом.При посещенииHTTP: // локальный: 8088 / кластерЯ считаю, что мой узел указан как &...