Resultados de la búsqueda a petición "scala"
¿Cómo obtener probabilidades de clasificación de MultilayerPerceptronClassifier?
Esto parece más relacionado con:Cómo obtener la probabilidad por instancia en los modelos de clasificación en ...
Suma de valores de PairRDD
Tengo un RDD de tipo: dataset :org.apache.spark.rdd.RDD[(String, Double)] = MapPartitionRDD[26]Que es equivalente a(Pedro, 0.0833), (Hello, 0.001828) ... Me gustaría resumir todo, el valor,0.0833+0.001828.. Pero no puedo encontrar una solución ...
Convertir lista Java a Scala Seq
Necesito implementar un método que devuelva un "Seq", en Java. Pero encuentro un error, no sé cómo resolverlo. java.util.ArrayList cannot be cast to scala.collection.SeqAquí está mi código hasta ahora @Override public Seq<String> columnNames() ...
En scala, ¿hay alguna forma de verificar si una instancia es un objeto singleton o no?
Si tengo una instancia de un objeto, ¿hay alguna forma de verificar si tengo un objeto singleton en lugar de una instancia de una clase? ¿Hay algún método que pueda hacer esto? Puede ser alguna API de reflexión? Sé que una diferencia es que el ...
Salir de Spark-shell del script scala
Estoy usando este comando para ejecutar scripts scala. spark-shell -i test.scalaAl final de la ejecución de la secuencia de comandos, todavía veo que se ejecuta spark-shell. He usado ": q /: quit" en el script test.scala para intentar salir ...
Apache Spark Exception en el hilo "main" java.lang.NoClassDefFoundError: scala / collection / GenTraversableOnce $ class
Versión de Scala: 2.11.7 (se tuvo que actualizar la versión de Scala para permitir que la clase de casos acepte más de 22 parámetros). Versión de Spark: 1.6.1 PFB pom.xml Obteniendo el siguiente error al intentar configurar la chispa en intellij ...
Spark Streaming mapWithState parece reconstruir el estado completo periódicamente
Estoy trabajando en un proyecto de transmisión Scala (2.11) / Spark (1.6.1) y estoy usandomapWithState() para realizar un seguimiento de los datos vistos de lotes anteriores. El estado se distribuye en 20 particiones en múltiples nodos, ...
Scala RegEx falla, Java uno tiene éxito
En el siguiente código, el mismo patrón coincide cuando se usa la API Java, pero no cuando se usa la coincidencia de patrones Scala. import java.util.regex.Pattern object Main extends App { val text ...
Spark Row a JSON
Me gustaría crear un JSON desde un marco de datos Spark v.1.6 (usando scala). Sé que existe la solución simple de hacerdf.toJSON. Sin embargo, mi problema se ve un poco diferente. Considere, por ejemplo, un marco de datos con las siguientes ...
¿Por qué envolver una llamada de método genérico con Opción difiere ClassCastException?
Digamos que tengo una matriz como esta *: val foo: Any = 1 : Int Option(foo.asInstanceOf[String])que falla por razones obvias: // java.lang.ClassCastException: java.lang.Integer cannot be cast to // java.lang.String // ... 48 elidedA ...