Результаты поиска по запросу "yarn"
Запуск пряжи с искрой не работает с Java 8
У меня есть кластер с 1 ведущим и 6 ведомыми, который использует предварительно собранную версию hadoop 2.6.0 и spark 1.6.2. Я запускал Hadoop MR и Spark Job...
Как Spark работает на учетной записи YARN для использования памяти Python?
После прочтения документации я не понимаю, как Spark работает на YARN-аккаунте для потребления памяти Python.Считается ли это в сторону
Как ограничить динамическое самораспределение ресурсов в кластере Hadoop под Yarn?
В нашем кластере Hadoop, работающем под управлением Yarn, у нас есть проблема, заключающаяся в том, что некоторые «умные» люди могут потреблять значительно б...
SPARK: YARN убивает контейнеры для превышения пределов памяти
В настоящее время мы сталкиваемся с проблемой, при которой задания Spark видят количество уничтоженных контейнеров за превышение пределов памяти при работе н...
Spark Yarn Cluster против клиента - как выбрать, какой использовать?
Искрадокументы иметь следующий параграф, который описывает разницу между клиентом пряжи и кластером пряжи:Существует два режима развертывания, которые можно ...
Это чит-свойство 'ipc.client.fallback-to-simple-auth-разрешено', его также следует перенести в Spark
есть два кластера cloudera 5.7.1, один защищенный с помощью Kerberos, а другой незащищенный.Можно ли запустить Spark с использованием незащищенного кластера ...