Не удалось создать искровой клиент: исключение Hive on spark

Я изменил свой механизм исполнения улья на SPARK. при выполнении любого DML / DDL я получаю исключение ниже.

hive> select count(*) from tablename;
Query ID = jibi_john_20160602153012_6ec1da36-dcb3-4f2f-a855-3b68be118b36
Total jobs = 1
Launching Job 1 out of 1
In order to change the average load for a reducer (in bytes):
set hive.exec.reducers.bytes.per.reducer=<number>
In order to limit the maximum number of reducers:
set hive.exec.reducers.max=<number>
In order to set a constant number of reducers:
set mapreduce.job.reduces=<number>
**Failed to execute spark task, with exception 'org.apache.hadoop.hive.ql.metadata.HiveException(Failed to create spark client.)'
**FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.spark.SparkTask****
 

Ответы на вопрос(2)

что вы достигли значения тайм-аута, прежде чем YARN назначит ApplicationMaster. Вы можете увеличить это значение тайм-аута, установив hive.spark.client.server.connect.timeout

Его значение по умолчанию составляет 90000 мс.

ь контейнера YARN и максимум, чтобы она была больше, чем у Spark Executor Memory + Overhead.

yarn.scheduler.maximum-selection-mb yarn.nodemanager.resource.memory-mb

Ваш ответ на вопрос