Resultados da pesquisa a pedido "hive"
Como fazer com que o MSCK REPAIR TABLE seja executado automaticamente no AWS Athena
Eu tenho um trabalho em lote que é executado a cada hora. Cada execução gera e armazena novos dados emS3 com o padrão de nomenclatura de diretórioDATA/YEAR=?/MONTH=?/DATE=?/datafile. Depois de enviar os dados paraS3, Quero investigá-los ...
Na seção, podemos alterar o local da tabela gerenciada / externa
Na seção, podemos alterar o local da tabela gerenciada / externa, se sim, como. Depois de mudar de local, ele se comportará como uma mesa externa ou interna
Executar Hive Query com parâmetros da cláusula IN em paralelo
Estou tendo uma consulta do Hive como a abaixo: select a.x as column from table1 a where a.y in (<long comma-separated list of parameters>) union all select b.x as column from table2 b where b.y in (<long comma-separated list of parameters>)Eu ...
A partição dinâmica não pode ser o pai de uma partição estática '3'
Ao inserir dados na seção da tabela, ocorreu o erro "A partição dinâmica não pode ser o pai de uma partição estática '3'" usando a consulta abaixo INSERIR NA TABELA student_partition PARTITION (curso, ano = 3) SELECT nome, id, curso FROM ...
Como coletar todos os dados na seção de subdiretórios
Eu tenho dados organizados em diretórios em um formato específico (mostrado abaixo) e quero adicioná-los à tabela de seção. Eu quero adicionar todos os dados do diretório 2012. Todos os nomes abaixo são nomes de diretório e o diretório mais ...
Ignorar a primeira linha de csv ao carregar na tabela de seção
Olá amigos, Criei tabela no hive com a ajuda do seguinte comando - CREATE TABLE db.test ( fname STRING, lname STRING, age STRING, mob BIGINT ) row format delimited fields terminated BY '\t' stored AS textfile;Agora, para carregar dados na ...
Como ver o conteúdo dos arquivos Hive orc no linux
Existe uma maneira de ver o conteúdo de um arquivo orc que contém a seção 0.11 e superior. Eu normalmente cat arquivos gz e os descomprimo para ver o conteúdo, por exemplo: cat part-0000.gz | pigz -d | mais Nota: pigz é um programa ...
Comando Hive para executar a cláusula NOT IN
Eu tenho duas tabelas, tab1 e tab2. tab1(T1) tab2(T2) a1 b1 b1 c1 c1 f1 d1 g1Estou procurando os valores da tabela T1 que não estão presentes no T2. Nesse caso, a saída deve sera1 d1 Eu tentei com a seguinte consulta, mas não consegui a solução ...
Hive - Existe uma maneira de otimizar ainda mais uma consulta HiveQL?
Escrevi uma consulta para encontrar os 10 aeroportos mais movimentados nos EUA de março a abril. Ele produz a saída desejada, no entanto, quero tentar otimizá-lo ainda mais. Existem otimizações específicas do HiveQL que podem ser aplicadas à ...
SemanticException no modo Hive Shell
exceção da colméia [https://i.stack.imgur.com/wfhIV.png] Instalei o Hadoop 3.0.0 e o Hive 2.3.1 no meu PC. Paralelamente eu instalei o mysql e trabalhei com comandos sql no modo sql shell e funcionando bem. Mas, ao executar consultas no modo de ...