Resultados da pesquisa a pedido "hadoop"

2 a resposta

HBase Filtro REST (SingleColumnValueFilter)

Não consigo descobrir como usar filtros na interface REST HBase (HBase 0.90.4-cdh3u3). A documentação apenas fornece uma definição de esquema para uma "string", mas não mostra como usá-l Então, eu sou capaz de fazer isso: curl -v -H ...

4 a resposta

Saída Múltipla no Redutor

Estou trabalhando no programa simples de redução de mapas. Quero criar arquivos diferentes após o redutor para cada palavra diferente na chave. Por exemplo, depois de executar o Mapreduce, tenho algo como Prioridade1 x 2 Prioridade1 e 2 ...

4 a resposta

Maven - Versão de dependência diferente no teste

Estou com um problema semelhante aoMaven 2 - diferentes versões de dependência em teste e compilação [https://stackoverflow.com/questions/6575742/maven-2-different-dependency-versions-in-test-and-compile] mas a resposta especificada não ...

8 a resposta

Como escrever trabalhos hadoop 'somente mapa'?

Sou iniciante no hadoop, estou me familiarizando com o estilo de programação de redução de mapa, mas agora enfrentei um problema: Às vezes, preciso apenas de mapa para um trabalho e só preciso do resultado do mapa diretamente como saída, o que ...

4 a resposta

Parar arquivos PDF no mapa do Hadoop Reduce

Tenho que analisar arquivos PDF, que estão no HDFS em um programa de redução de mapa no Hadoop. Então, eu recebo o arquivo PDF do HDFS comoInput splits e deve ser analisado e enviado para a classe Mapper. Para implementar este InputFormat, eu ...

6 a resposta

como carregar arquivos no cluster hadoop usando o apache pi

Tenho um script pig e preciso carregar arquivos do cluster hadoop local. Posso listar os arquivos usando o comando hadoop: hadoop fs –ls / repo / mydata, `mas quando tentei carregar arquivos no script pig, ele falhou. a instrução load ...

6 a resposta

Quais são os prós e os contras de executar um trabalho no Hadoop usando vários idiomas?

Eu tenho usado o Pig ou Java para Map Reduce exclusivamente para executar tarefas em um cluster Hadoop até agora. Recentemente, experimentei usar o Python Map Reduce através do streaming do Hadoop e isso foi bem legal também. Tudo isso faz ...

8 a resposta

Hbase: Como especificar o nome do host para o Hbase master

Estou lutando para configurar um cluster distribuído Hbase com 2 nós, um é minha máquina e outro é a VM, usando o adaptador "somente host" no VirtualBo Meu problema é que o servidor da região (da máquina VM) não pode se conectar ao mestre ...

2 a resposta

Como posso particionar uma tabela com o HIVE?

Estou brincando com o Hive há alguns dias, mas ainda tenho dificuldades com a partiçã Estou gravando logs do Apache (formato Combinar) no Hadoop há alguns meses. Eles são armazenados no formato de texto de linha, particionados por data ...

2 a resposta

eplicação HDFS - Dados Armazenados

Sou um novato em relação ao hadoop e quero entender melhor como a replicação funciona no HDF Diga que eu tenho um sistema de 10 nós (1 TB cada nó), fornecendo uma capacidade total de 10 TB. Se eu tiver um fator de replicação 3, tenho 1 ...