Resultados da pesquisa a pedido "scala"

3 a resposta

Como encontrar áreas retangulares de mesmo valor de um determinado tamanho em uma matriz com mais eficiência?

Meu problema é muito simples, mas ainda não encontrei uma implementação eficiente. Suponha que exista uma matriz A como esta: 0 0 0 0 0 0 0 4 4 2 2 2 0 0 4 4 2 2 2 0 0 0 0 2 2 2 1 1 0 0 0 0 0 1 1Agora, quero encontrar todas as posições iniciais ...

1 a resposta

Como usar o arquivo do Databricks FileStore

Tentando usar um.dat arquivo para pesquisa de ip. O arquivo está no armazenamento de arquivos Databricks do código Scala: def getCountryCode(ip: String) { val filePath = "FileStore/maxmind/GeoIPCountry.dat" val ipLookups = new IpLookups(geoFile ...

1 a resposta

Como ler o arquivo do Excel no Scala [fechado]

Existe uma maneira de ler um arquivo do Excel no Scala (xls não csv)? Quero dizer, existem bibliotecas Scala para fazer isso?

1 a resposta

Como corrigir faísca horrivelmente mal interpretando csv?

Eu tenho dois arquivos csv, um contendo palavras-chave para filmes, o outro contendo elenco e equipe. okeywords.csv o arquivo fica assim: $ head -n 3 keywords.csv id,keywords 862,"[{'id': 931, 'name': 'jealousy'}, {'id': 4290, 'name': 'toy'}, ...

3 a resposta

Tocar json Read e parâmetros padrão para a classe case?

Estou com um problema com os parâmetros padrão e usando o Play Json Read. Aqui está o meu código: case class Test(action: String, storeResult: Option[Boolean] = Some(true), returndata: Option[Boolean] = Some(true)) val json = """ {"action": ...

1 a resposta

O CrossValidator não suporta o VectorUDT como rótulo no spark-ml

Eu tenho um problema com ml.crossvalidator no scala spark enquanto estiver usando um codificador quente. este é o meu código val tokenizer = new Tokenizer(). setInputCol("subjects"). setOutputCol("subject") //CountVectorizer / TF val ...

2 a resposta

Como usar o modo de saída de atualização com o formato FileFormat?

Estou tentando usar o streaming estruturado do spark no modo de saída de atualização para gravar em um arquivo. eu encontreieste ...

1 a resposta

Os nomes das colunas do DataFrame entram em conflito com. (Ponto)

Eu tenho um DataFramedf que possui este esquema: root |-- person.name: string (nullable = true) |-- person: struct (nullable = true) | |-- age: long (nullable = true) | |-- name: string (nullable = true) Quando eu façodf.select("person.name") ...

1 a resposta

Erro Scala ao compilar OptionBuilder

Estou usando o Apache commons cli (1.2) para análise de linha de comando. Eu tenho o seguinte no meu código: import org.apache.commons.cli.OptionBuilder OptionBuilder.withLongOpt("db-host").hasArg. withDescription("Name of the database ...

1 a resposta

Existe um motivo para não usar SparkContext.getOrCreate ao escrever um trabalho de faísca?

Estou escrevendo Spark Jobs que conversam com Cassandra no Datastax. Às vezes, ao trabalhar com uma sequência de etapas em um trabalho do Spark, é mais fácil obter um novo RDD do que ingressar no antigo. Você pode fazer isso chamando ...