Resultados da pesquisa a pedido "mapreduce"
Quais são os prós e os contras de executar um trabalho no Hadoop usando vários idiomas?
Eu tenho usado o Pig ou Java para Map Reduce exclusivamente para executar tarefas em um cluster Hadoop até agora. Recentemente, experimentei usar o Python Map Reduce através do streaming do Hadoop e isso foi bem legal também. Tudo isso faz ...
Como posso particionar uma tabela com o HIVE?
Estou brincando com o Hive há alguns dias, mas ainda tenho dificuldades com a partiçã Estou gravando logs do Apache (formato Combinar) no Hadoop há alguns meses. Eles são armazenados no formato de texto de linha, particionados por data ...
Merging duas coleções no MongoDB
Eu tenho tentado usar o MapReduce no MongoDB para fazer o que eu acho que é um procedimento simples. Não sei se essa é a abordagem correta, se devo usar o MapReduce. Pesquisei no Google as palavras-chave em que pensei e tentei acessar os ...
identityreducer na nova API do Hadoop
Passei quase um dia, mas não consegui descobrir como usar o IdentityReducer na nova API do Hadoop. Todas as referências ou classes que posso encontrar estão com a API antiga. E, obviamente, misturar a antiga classe de identificação de API do ...
Chamar um trabalho de mapreduce a partir de um programa java simples
Estive tentando chamar um trabalho de mapreduce a partir de um programa java simples no mesmo pacote. Tentei consultar o arquivo jar mapreduce no meu programa java e chamá-lo usando orunJar(String args[]) passando também os caminhos de entrada e ...
Como usar o código MATLAB no mapeador (Hadoop)?
Tenho um código matlab que processa imagens. Eu quero criar um mapeador Hadoop que use esse código. Encontrei as seguintes soluções, mas não tenho certeza qual delas é a melhor (pois é muito difícil instalar o tempo de execução do compilador ...
A operação de redução de mapa do Hadoop está falhando na saída da gravação
Finalmente, sou capaz de iniciar um trabalho de redução de mapa no Hadoop (executando em uma única máquina debian). No entanto, o trabalho de redução de mapa sempre falha com o seguinte erro: hadoopmachine@debian:~$ ./hadoop-1.0.1/bin/hadoop ...