Resultados da pesquisa a pedido "scala"
Qual é a diferença entre A <: B e + B no Scala?
Qual é a diferença entre [A <: B]e [+B]em Scala?
Por que esse código Spark cria NullPointerException?
Estou com um problema ao executar um aplicativo Spark. Código fonte: // Read table From HDFS val productInformation = spark.table("temp.temp_table1") val dict = spark.table("temp.temp_table2") // Custom UDF val countPositiveSimilarity = ...
Maneira ideal de criar um pipeline de ml no Apache Spark para conjunto de dados com alto número de colunas
Estou trabalhando com o Spark 2.1.1 em um conjunto de dados com recursos ~ 2000 e tentando criar um pipeline básico de ML, composto por alguns transformadores e um classificador. Vamos supor, por uma questão de simplicidade, que o Pipeline com o ...
Por que a associação não é possível após o operador show?
O código a seguir funciona bem até eu adicionarshow depois deagg. Porque éshow não é possivel? val tempTableB = tableB.groupBy("idB") .agg(first("numB").as("numB")) //when I add a .show here, it doesn't work tableA.join(tempTableB, $"idA" === ...
remover colunas NULL no Spark SQL
Como remover colunas que contêm apenas valores nulos de uma tabela? Suponha que eu tenha uma mesa - SnapshotDate CreationDate Country Region CloseDate Probability BookingAmount RevenueAmount SnapshotDate1 CreationDate1 CloseDate1 null null null ...
Converter função Scala em função Kotlin
Eu sou muito novo no scala Kotlin e estou tentando converter algum código do scala para o Kotlin, apenas como uma maneira de entender algumas coisas. Um problema com o qual estou tendo problemas é converter essa função scala em uma função ...
No Scala, o que é um "inicializador inicial"?
No livro de Martin Oderskypost recente sobre os níveis de habilidade do programador [http://www.scala-lang.org/node/8610]em Scala, noDesigner especialista em bibliotecas seção, ele inclui o termo"inicializadores iniciais". Estes não são ...
Curso Instalando o sbt no Windows 10 for Scala
As instruções do curso dizem para usar a versão 0.13.x. Instalei o msi mais recente no site sbt, mas quando digito "sbt about", recebo: Microsoft Windows [Version 10.0.15063] (c) 2017 Microsoft Corporation. All rights reserved. ...
Como usar o Scalatest para desenvolver um plug-in de compilador no Scala
Na verdade, estou desenvolvendo um plug-in de compilação para o Scala, de acordo com o artigohttp://www.scala-lang.org/node/140 [http://www.scala-lang.org/node/140]. Aqui está o código do plugin: package localhost import scala.tools.nsc import ...
Como compor o nome da coluna usando o valor de outra coluna para withColumn no Scala Spark
Estou tentando adicionar uma nova coluna a umDataFrame. O valor desta coluna é o valor de outra coluna cujo nome depende de outras colunas da mesmaDataFrame. Por exemplo, dado o seguinte: +---+---+----+----+ | A| B| A_1| B_2| ...