Como copiar toda a tabela de seção de um banco de dados para outro banco de dados

Eu tenho db padrão na tabela de seção, que contém 80 tabelas. Criei mais um banco de dados e desejo copiar todas as tabelas do banco de dados padrão para novos bancos de dados. Existe alguma maneira de copiar de um banco de dados para outro ...

Descartando várias partições no Impala / Hive

1- Estou tentando excluir várias partições de uma só vez, mas lutando para fazê-lo com o Impala ou o Hive. Eu tentei a seguinte consulta, com e sem': ALTER TABLE cz_prd_corrti_st.s1mme_transstats_info DROP IF EXISTS ...

Como fazer com que o Spark Streaming escreva sua saída para que o Impala possa lê-la?

Eu tenho o seguinte problema com a API de streaming do Spark. Atualmente, estou transmitindo dados de entrada via Flume para Spark Streaming, com o qual pretendo fazer um pré-processamento para os dados. Em seguida, gostaria de salvar os dados no ...

Os carimbos de hora da Impala não correspondem ao Hive - um problema de fuso horário?

Eu tenho alguns dados do log de eventos no HDFS que, em seu formato bruto, são assim: 2015-11-05 19:36:25.764 INFO [...etc...]Uma tabela externa aponta para este local do HDFS: CREATE EXTERNAL TABLE `log_stage`( `event_time` timestamp, [...]) ...

Chamando o JDBC para impala / seção de dentro de um trabalho de faísca e criando uma tabela

Estou tentando escrever um trabalho de faísca no scala que abra uma conexão jdbc com o Impala e deixe-me criar uma tabela e executar outras operações. Como eu faço isso? Qualquer exemplo seria de grande ajuda. Obrigado!

Como definir a configuração no arquivo Hive-Site.xml para a conexão do metastore do hive?

Quero conectar o MetaStore usando o código java. Não tenho idéia de como definir a configuração no arquivo Hive-Site.xml e onde postarei o arquivo Hive-Site.xml. Por favor ajude. import java.sql.Connection; import java.sql.DriverManager; ...

Como o impala fornece uma resposta de consulta mais rápida em comparação com a colmeia

Erro ao conectar-se ao impala com JDBC sob a autenticação kerberos

Crio uma classe SecureImpalaDataSource que estende DriverManagerDataSource e usoUserGroupInformation.doAs() obter uma conexão ao impala com o arquivo keytab. Mas recebo o erro da seguinte forma: java.sql.SQLException: [Simba] ImpalaJDBCDriver ...

Erro Kerberos ao conectar-se ao impala e hbase

Estamos desenvolvendo um aplicativo da web que interage com componentes do hadoop, como HDFS, HBase e Impala. O cluster é kerberizado, estamos autenticando com a configuração do JAAS. Estamos configurando o JAAS nos argumentos da VM como ...

Impala não pode acessar toda a tabela de colmeia

Eu tento consultar os dados do hbase por meio do hive (estou usando o cloudera). Eu fiz uma tabela externa do hive da lista apontando para o hbase, mas a coi...