Resultados de la búsqueda a petición "scala"

2 la respuesta

Qué función en spark se usa para combinar dos RDD por teclas

Digamos que tengo los siguientes dos RDD, con los siguientes valores de pares de claves. rdd1 = [ (key1, [value1, value2]), (key2, [value3, value4]) ]y rdd2 = [ (key1, [value5, value6]), (key2, [value7]) ]Ahora, quiero unirlos por valores ...

3 la respuesta

Scala 2.8 TreeMap y pedidos personalizados

Estoy cambiando de scala 2.7 y ordenado a scala 2.8 y usando el pedido. Parece bastante sencillo, pero me preguntaba si podría hacerlo un poco menos detallado. Por ejemplo: scala> case class A(i: Int) defined class A scala> object A extends ...

1 la respuesta

¿Compilar cadena para AST dentro de CompilerPlugin?

Me gustaría crear un plugin de plantillas y como primer paso convertir una cadena arbitraria a su representación AST "compilada" (como lo hace el intérprete de scala, supongo). Por lo tanto, un complemento del compilador podría, por ejemplo, ...

1 la respuesta

Problemas al agregar una nueva columna a un marco de datos - spark / scala

Soy nuevo en spark / scala. Estoy tratando de leer algunos datos de una tabla de colmena en un marco de datos de chispa y luego agregar una columna basada en alguna condición. Aquí está mi código: val DF = hiveContext.sql("select * from (select ...

3 la respuesta

Tuplas de filtro de escala (x, y) == (y, x)

Tengo una lista de tuplas, por ejemplo: (0,2) (0,5) (2,0) (2,5) (3,4) (4,3) (5,0) (5,2)Hay algunas tuplas donde(x, y) == (y, x), por ejemplo (5, 0) y (0, 5). Quiero dejar solo uno de ellos, por ejemplo el primero. ¿Cómo puedo hacerlo?

1 la respuesta

¿Qué se entiende por tipos dependientes de la ruta de Scala?

He oído que Scala tiene tipos dependientes de la ruta. Tiene algo que ver con las clases internas, pero ¿qué significa esto realmente y por qué me importa?

3 la respuesta

¿Cómo convertir un formato de fecha y hora personalizado a la marca de tiempo?

¿Alguna idea de por qué obtengo el resultado a continuación? scala> val b = to_timestamp($"DATETIME", "ddMMMYYYY:HH:mm:ss") b: org.apache.spark.sql.Column = to_timestamp(`DATETIME`, 'ddMMMYYYY:HH:mm:ss') scala> sourceRawData.withColumn("ts", ...

6 la respuesta

Scala y Java BigDecimal

Quiero cambiar de Java a un lenguaje de script para los módulos basados en matemáticas en mi aplicación. Esto se debe a la legibilidad y las limitaciones funcionales de mathy Java. Por ejemplo, en Java tengo esto: BigDecimal x = new ...

3 la respuesta

Juega con el problema del activador en IntelliJ Idea 14

Tengo el siguiente problema en IntelliJ IDEA 14: Creé un proyecto Play (Scala) usando el Activador (v1.2.10). Luego, lo convertí en un proyecto IDEA usandoactivator idea mando. Cuando abrí el proyecto conIDEA 14(Community Edition) el módulo SBT ...

1 la respuesta

Cómo soltar duplicados usando condiciones [duplicar]

Esta pregunta ya tiene una respuesta aquí: ¿Cómo seleccionar la primera fila de cada grupo? [/questions/33878370/how-to-select-the-first-row-of-each-group] 8 respuestas Tengo el siguiente DataFramedf: ¿Cómo puedo eliminar duplicados, ...