Escrevendo dados para o Hadoop

Eu preciso gravar dados no Hadoop (HDFS) de fontes externas, como uma caixa do Windows. Agora eu tenho copiado os dados para o namenode e usando o comando pu...

Explodindo uma linha de dados XML no Hive

Temos dados XML carregados no Hadoop como uma única coluna de string chamada XML. Estamos tentando recuperar para níveis de dados uma normalizar ou explodi-l...

Associação de similaridade usando o Hadoop

Eu sou novo no hadoop. Eu gostaria de fazer algumas abordagens com você que eu criei. Problema: 2 conjuntos de dados: A e B. Ambos os conjuntos de dados representam músicas: alguns atributos de nível superior, títulos (1 ..), artistas (1 ...

Solicitações interrompem ao usar o cliente Hiveserver2 Thrift Java

Esta é uma pergunta de acompanhamentoessa questão onde eu pergunto o que é o Hiveserver 2 thrift java client API. Esta questão deve ser capaz de se manter se...

Adicione vários arquivos ao cache distribuído no HIVE

Atualmente, tenho um problema ao adicionar um conteúdo de pastas ao cache desconfiado do Hives. Posso adicionar com êxito vários arquivos ao cache distribuíd...

Exceção de soma de verificação ao ler ou copiar para hdfs no apache hadoop

Eu estou tentando implementar um algoritmo paralelizado usando o Apache hadoop, no entanto, estou enfrentando alguns problemas ao tentar transferir um arquiv...

Como funciona a recuperação no HBase

java.lang.OutOfMemoryError: não é possível criar um novo thread nativo para o big data set

Eu tenho executando consulta de seção que funcionando bem para o conjunto de dados pequeno. mas eu estou correndo para 250 milhões de registros que eu tenho ...

Como verificar se os daemons do Hadoop estão em execução?

O que são comandos simples para verificar se os daemons do Hadoop estão em execução?Por exemplo, se eu estou tentando descobrir por que o HDFS não está confi...

O arquivo jobtracker.info só pode ser replicado para 0 nós, em vez de 1

Estou tentando configurar