Resultados da pesquisa a pedido "hive"

1 a resposta

Como faço para corrigir “O arquivo só pode ser replicado para 0 nós em vez de minReplication (= 1).”?

Fiz uma pergunta semelhante há um tempo atrás [https://stackoverflow.com/questions/53959342/why-do-i-get-file-could-only-be-replicated-to-0-nodes-when-writing-to-a-partit] e achei que resolvi esse problema, mas acabou que ele desapareceu ...

1 a resposta

Como criar um número n de tabelas externas com um único caminho hdfs usando o Hive

É possível criar um número n de tabelas externas apontando para um único caminho de hdfs usando o Hive. Se sim, quais são as vantagens e suas limitaçõe

2 a resposta

Como inserir o DataFrame de fluxo estruturado spark na tabela / localização externa do Hiv

ma consulta na integração de streaming estruturado spark com a tabela HIV Tentei fazer alguns exemplos de streaming estruturado com faísc aqui é meu exemplo val spark =SparkSession.builder().appName("StatsAnalyzer") ...

1 a resposta

Partição Handle na tabela Hive ao usar o Sqoop import

Eu tenho uma pergunta sobre o utilitário de importação do sqoop. Entendo que podemos executar uma "importação de sqoop" e obter os dados de um RDBMS (SQL Server no meu caso) e colocá-los diretamente em uma tabela de seção (será ...

3 a resposta

Como otimizar o particionamento ao migrar dados da fonte JDBC?

Estou tentando mover dados de uma tabela na tabela do PostgreSQL para uma tabela do Hive no HDFS. Para fazer isso, criei o seguinte código: val conf = ...

1 a resposta

Qual é o equivalente da função Presto UNNEST no Hive

O Presto tem umUNNEST função para explodir colunas feitas de matrizes. Existe um similar para o Hive? Veja documentos paraUNNEST função do Prestoaqui [https://prestodb.io/docs/current/sql/select.html].

1 a resposta

SemanticException no modo Hive Shell

exceção da colméia [https://i.stack.imgur.com/wfhIV.png] Instalei o Hadoop 3.0.0 e o Hive 2.3.1 no meu PC. Paralelamente eu instalei o mysql e trabalhei com comandos sql no modo sql shell e funcionando bem. Mas, ao executar consultas no modo de ...

1 a resposta

A partição dinâmica não pode ser o pai de uma partição estática '3'

Ao inserir dados na seção da tabela, ocorreu o erro "A partição dinâmica não pode ser o pai de uma partição estática '3'" usando a consulta abaixo INSERIR NA TABELA student_partition PARTITION (curso, ano = 3) SELECT nome, id, curso FROM ...

2 a resposta

Como combinar ou mesclar arquivos ORC pequenos em um arquivo ORC maior?

A maioria das perguntas / respostas no SO e na web discutem o uso do Hive para combinar vários arquivos ORC pequenos em um maior, no entanto, meus arquivos ORC são arquivos de log separados por dia e preciso mantê-los separados. Eu só ...

2 a resposta

Substituir apenas algumas partições em um conjunto de dados spark particionado

Como podemos sobrescrever um conjunto de dados particionado, mas apenas as partições que vamos alterar? Por exemplo, recalculando o trabalho diário da semana passada e substituindo apenas os dados da semana passada. O comportamento padrão do ...