Resultados da pesquisa a pedido "user-defined-functions"
Passando uma lista para Javascript UDF no Apache Pig
Se eu tenho uma série de coisas em Pig, assim:
Use um Enum incorporado em uma fórmula de célula com um UDF
Eu tenho uma função definida pelo usuário que leva um parâmetro que tem um builtin associado
Parâmetros opcionais do PHP - especifique o valor do parâmetro pelo nome?
Eu sei que é possível usar argumentos opcionais da seguinte maneira: function doSomething($do, $something = "something") { } doSomething("do"); doSomething("do", "nothing");Mas suponha que você tenha a seguinte situação: function ...
Sobre como adicionar uma nova coluna a um DataFrame existente com valores aleatórios no Scala
Eu tenho um quadro de dados com um arquivo parquet e tenho que adicionar uma nova coluna com alguns dados aleatórios, mas preciso que os dados aleatórios sejam diferentes. Este é o meu código atual e a versão atual do spark ...
Return Seq [Row] do Spark-Scala UDF
Estou usando o Spark com Scala para fazer algum processamento de dados. Eu tenho dados XML mapeados para dataframe. Estou passando um Row como parâmetro para o UDF e tentando extrair dois objetos de tipos complexos como uma lista. Spark está me ...
Como encontrar a média das colunas de vetor agrupadas no Spark SQL?
Eu criei umRelationalGroupedDataset chamandoinstances.groupBy(instances.col("property_name")): val x = instances.groupBy(instances.col("property_name"))Como componho umfunção agregada definida pelo ...
PySpark 2.1: Importando módulo com quebras de UDF Hive connectivity
Atualmente, estou trabalhando com o Spark 2.1 e tenho um script principal que chama um módulo auxiliar que contém todos os meus métodos de transformação. Em outras palavras: main.py helper.pyNo topo da minhahelper.py file Tenho vários UDFs ...
sql para separar uma sequência de nomes de pessoas e exibir as iniciais
como posso obter SQL para tomar uma picada e retornar a primeira letra de cada palavra passada para ele. Quero usar esse UDF para gerar iniciais para nomes de pessoas que tenho no banco de dados. nomes podem ser 2 (fname, lname) ou 3 (... ...