Resultados de la búsqueda a petición "scala"
cómo leer json con esquema en marcos de datos de chispa / spark sql
sql / dataframes, ayúdame o proporciona alguna buena sugerencia sobre cómo leer este json { "billdate":"2016-08-08', "accountid":"xxx" "accountdetails":{ "total":"1.1" "category":[ { "desc":"one", "currentinfo":{ "value":"10" }, "subcategory":[ ...
Spark mejor enfoque de búsqueda de datos para mejorar el rendimiento
Marco de datos A (millones de registros) uno de la columna es create_date, modified_date Los registros del marco de datos B 500 tienen fecha_inicio y fecha_finalización Enfoque actual: Select a.*,b.* from a join b on a.create_date between ...
Comparación en Scala
Cuál es la diferencia entreval a=new String("Hello") yval a="Hello" Ejemplo: val a="Hello" val b="Hello" a eq b res:Boolean=TrueSimilar: val a=new String("Hello") val b=new string("Hello") a eq b res:Bolean=False
Spark DataFrame: ¿groupBy after orderBy mantiene ese orden?
Tengo un marco de datos Spark 2.0example con la siguiente estructura: id, hour, count id1, 0, 12 id1, 1, 55 .. id1, 23, 44 id2, 0, 12 id2, 1, 89 .. id2, 23, 34 etc.Contiene 24 entradas para cada id (una para cada hora del día) y se ordena por ...
Cadena de conversión implícita de colección
No puedo hacer una conversión implícita Lista [A] => Lista [B], dada la conversión implícita A => B. Hay un muypregunta relacionada que tiene una solución pero no funciona para ...
¿Cómo puedo modificar cada elemento de una lista mientras lo itero en Scala?
Tengo una lista de cadenas declarada así: var re1_emoticons=""::NilQue luego he completado con emoticones (Strings). Estoy tratando de agregar un\\ al comienzo de cada cadena enre1_emoticons, modificando la var. original Primer ...
Convierta cualquier tipo en scala a Array [Byte] y viceversa
Tengo la siguiente pregunta: Tengo un valor variable en mi programa que se declara como Cualquier valor. Quiero convertir este valor a Byte Array ... ¿Cómo puedo serializar a Byte Array y viceversa? Encontré ejemplos relacionados con otros ...
Error al inicializar el compilador: objeto java.lang.Object en el espejo del compilador no encontrado
En Ubuntu 16.04, instaléscala: $ls ~/Binary/scala-2.11.8 bin doc lib man $grep -A 2 SCALA ~/.bashrc SCALA=~/Binary/scala-2.11.8 SBT=~/Binary/sbt export PATH=$PATH:$SCALA/bin:$SBT/binConopenjdk8 instalado,scala falla al abrir REPL: $javac ...
Scala: escriba el registro en el archivo con log4j
Estoy tratando de construir un archivo jar basado en scala en eclipse que use log4j para crear registros. Se imprime perfectamente en la consola, pero cuando trato de usar el archivo log4j.properties para escribir en un archivo de registro, no ...
SBT: estrategia de fusión de proyectos múltiples y estructura de estructura sbt cuando se usa ensamblaje
Tengo un proyecto que consta de múltiples proyectos más pequeños, algunos con dependencias entre sí, por ejemplo, hay un proyecto de utilidad que depende del proyecto de bienes comunes. Otros proyectos pueden o no depender de servicios públicos o ...