Resultados de la búsqueda a petición "scala"
Spark DataFrame entrega una cadena vacía en OneHotEncoder
Estoy importando un archivo CSV (usando spark-csv) en unDataFrame que tiene vacioString valores. Cuando se aplica elOneHotEncoder, la aplicación se bloquea con errorrequirement failed: Cannot have an empty string for name.. ¿Hay alguna manera de ...
¿Puede SBT publicar en el artefacto JFrog
Mi organización utiliza el artefacto JFROG para la distribución de todos los frascos. Hasta ahora siempre he usado SBT para mi desarrollo Scala. Pero ahora, cuando estoy buscando formas de publicar frascos creados por SBT en el artefacto ...
Play framework y creación automática de bases de datos Slick
Estoy usando play 2.4 y Slick 3, ¿es posible generar scripts ddl automáticamente, son evoluciones? En los documentos oficiales encontré algunos scripts, pero ¿dónde debería colocarlo en el marco de ...
¿Qué lenguajes de programación se pueden usar para desarrollar en Android? [duplicar]
Posible duplicado: ¿Qué lenguajes de programación puedo usar en Android Dalvik? [https://stackoverflow.com/questions/1994703/which-programming-languages-can-i-use-on-android-dalvik] En su mayoría, las aplicaciones de Android están escritas en ...
El maestro debe comenzar con hilo, chispa
Recibo este error cuando quiero ejecutar el ejemplo de SparkPi. beyhan@beyhan:~/spark-1.2.0-bin-hadoop2.4$ /home/beyhan/spark-1.2.0-bin-hadoop2.4/bin/spark-submit --master ego-client --class ...
error avro en AWS EMR
Estoy usando spark-redshift (https://github.com/databricks/spark-redshift [https://github.com/databricks/spark-redshift]) que utiliza avro para la transferencia. Leer de Redshift está bien, mientras escribo me sale Caused by: ...
Acceso a HDFS HA desde el trabajo por chispa (error UnknownHostException)
Tengo el clúster Apache Mesos 0.22.1 (3 maestros y 5 esclavos), ejecutando Cloudera HDFS (2.5.0-cdh5.3.1) en la configuración HA y el marco Spark 1.5.1. Cuando intento generar una aplicación de ejemplo compilada de HdfsTest.scala (de fuentes de ...
¿Cómo guardar un DataFrame de chispa como csv en el disco?
Por ejemplo, el resultado de esto: df.filter("project = 'en'").select("title","count").groupBy("title").sum() devolvería una matriz. ¿Cómo guardar un DataFrame de chispa como un archivo csv en el disco?
Deserialización de objeto de caso en Scala con JSON4S
Tengo algunas clases de casos definidas de la siguiente manera: sealed trait Breed case object Beagle extends Breed case object Mastiff extends Breed case object Yorkie extends Breed case class Dog(name: String, breed: Breed)También tengo un ...
biblioteca de errores de compilación de spark sbt
1.2.0-bin-hadoop2.4 y mi versión Scala es2.11.7. Recibo un error, así que no puedo usar sbt. ~/sparksample$ sbtStarting sbt: invoke with -help for other options [info] Set current project to Spark Sample (in build ...