Resultados da pesquisa a pedido "hive"
Como passar a variável conf Hive no hive udf?
Eu quero passar a variável conf da seção para a UDF. abaixo está um trecho de código. hive -f ../hive/testHive.sql -hivevar testArg=${testArg}Abaixo está a chamada da colmeia UDF. select setUserDefinedValueForColumn(columnName,'${testArg}') ...
Concatene campos de coluna única usando GROUP BY
Existe alguma maneira de combinar / concat os campos em uma coluna agrupando-os. Por exemplo: col1 col2 1 aa 1 bb 1 cc 2 dd 2 eeEu quero consultar algo como: select col1, concat(col2) from tableName group by col1;A saída deve ser: 1 aa,bb,cc 2 ...
Carga Delta / Incremental no Hive
Eu tenho o caso de uso abaixo: Minha aplicação tem uma tabela tendodados plurianuaisnoRDBMSDB. Nós usamossqoop para obter dados no HDFS e carregados na tabela de seção dividida porano mês. Agora, o aplicativo é atualizado e insere novos ...
Como o Hive se compara ao HBase?
Estou interessado em descobrir como o recém-lançado ( http://mirror.facebook.com/facebook/hive/hadoop-0.17/ [http://mirror.facebook.com/facebook/hive/hadoop-0.17/]) O Hive se compara ao HBase em termos de desempenho. A interface do tipo SQL usada ...
Como fazer com que o Spark Streaming escreva sua saída para que o Impala possa lê-la?
Eu tenho o seguinte problema com a API de streaming do Spark. Atualmente, estou transmitindo dados de entrada via Flume para Spark Streaming, com o qual pretendo fazer um pré-processamento para os dados. Em seguida, gostaria de salvar os dados no ...
como converter um carimbo de data / hora em string (sem alterar o fuso horário)?
Tenho algumas vezes unix que converto em timestamps emsparklyr e por alguns motivos, também preciso convertê-los em strings. Infelizmente, parece que durante a conversão em stringhive converte para EST (minha localidade). df_new <- ...
Como combinar ou mesclar arquivos ORC pequenos em um arquivo ORC maior?
A maioria das perguntas / respostas no SO e na web discutem o uso do Hive para combinar vários arquivos ORC pequenos em um maior, no entanto, meus arquivos ORC são arquivos de log separados por dia e preciso mantê-los separados. Eu só ...
O campo obrigatório 'client_protocol' está desativado
Estou usando o Hive 0.12 e estou tentando o JDBC do apache. Quando tento executar o código, obtenho apache.thrift.TApplicationException. import java.sql.SQLException; import java.sql.Connection; import java.sql.ResultSet; import ...
Conecte-se do Java ao Hive usando JDBC
Estou tentando conectar do Java ao servidor Hive 1. Encontrei uma pergunta há algum tempo neste fórum, mas ele não funciona para mim. Estou usando este código: import java.sql.SQLException; import java.sql.Connection; import java.sql.ResultSet; ...
Conversão de formato de data no Hive
Eu sou muito novo no sql / hive. Inicialmente, carreguei um arquivo txt na seção usando: drop table if exists Tran_data; create table Tran_data(tran_time string, resort string, settled double) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' ...