Cualquier trabajo de chispa que ejecute fallará con el siguiente mensaje de error

17/06/16 11:10:43 WARN cluster.YarnScheduler: El trabajo inicial no ha aceptado ningún recurso; verifique la interfaz de usuario de su clúster para asegurarse de que los trabajadores estén registrados y tengan suficientes recursos

La versión de Spark es 1.6, que se ejecuta en Yarn.

Estoy publicando trabajos de pyspark.

Y puede observar en la línea de tiempo del trabajo que se ejecuta indefinidamente y que no se agregan ni eliminan recursos.1