¿Por qué falla el envío de chispas con "IllegalArgumentException: falta un recurso de aplicación"?
Cuando creo el jar de mi aplicación Spark e intento ejecutarlo usandospark-submit
, Estoy teniendo el siguiente error.
Este es el comando que solía ejecutar.
spark-submit --executor-memory 1g --jars s3://test-data-lab-users/spachari/test/test_2.10-1.0.jar
Este es el error que estoy recibiendo. ¿Significa esto que no he pasado los parámetros correctos en mi envío de chispa?
Exception in thread "main" java.lang.IllegalArgumentException: Missing application resource.
at org.apache.spark.launcher.CommandBuilderUtils.checkArgument(CommandBuilderUtils.java:241)
at org.apache.spark.launcher.SparkSubmitCommandBuilder.buildSparkSubmitArgs(SparkSubmitCommandBuilder.java:160)
at org.apache.spark.launcher.SparkSubmitCommandBuilder.buildSparkSubmitCommand(SparkSubmitCommandBuilder.java:276)
at org.apache.spark.launcher.SparkSubmitCommandBuilder.buildCommand(SparkSubmitCommandBuilder.java:151)
at org.apache.spark.launcher.Main.main(Main.java:86)
Command exiting with ret '1'