Результаты поиска по запросу "yarn"
Не удалось инициализировать исключение кластера во время выполнения задания в Hadoop 2
Вопрос связан с моим предыдущим вопросом [https://stackoverflow.com/a/19571962/915751]Все демоны запущены, jps показывает: 6663 JobHistoryServer 7213 ResourceManager 9235 Jps 6289 DataNode 6200 NameNode 7420 NodeManagerноwordcount Пример ...
Apache Spark: количество ядер против количества исполнителей
Я пытаюсь понять взаимосвязь количества ядер и числа исполнителей при запуске задания Spark на YARN.Тестовая среда выглядит следующим образом:Количество узло...
Какую дополнительную выгоду приносит пряжа для существующей карты?
Пряжа отличается по своему инфраструктурному слою от оригинальной карты уменьшения архитектуры следующим образом: В YARN трекер заданий разделен на два разных демона, называемыхResource Manager а такжеNode Manager (конкретный узел). Диспетчер ...
Разница между диспетчером приложений и мастером приложений в YARN?
Я понял, как работает MRv1. Теперь я пытаюсь понять MRv2. В чем разница между Application Manager и Application Master в YARN?
Это чит-свойство 'ipc.client.fallback-to-simple-auth-разрешено', его также следует перенести в Spark
есть два кластера cloudera 5.7.1, один защищенный с помощью Kerberos, а другой незащищенный.Можно ли запустить Spark с использованием незащищенного кластера ...
Как установить точное максимальное число одновременно выполняемых задач на узел в Hadoop 2.4.0 на Elastic MapReduce
В соответствии сhttp://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/формула для определения количества одновременно за...
Apache Hadoop Yarn - недоиспользование ядер
Неважно, сколько я возиться с настройками в