Resultados da pesquisa a pedido "hadoop"
rquivos pequenos e blocos HD
Um bloco no Hadoop Distributed File System armazena vários arquivos pequenos ou um bloco armazena apenas 1 arquivo?
Que idioma usar nos programas Hadoop Map / Reduce? Java ou PHP?
ecentemente, escrevi alguns programas de mapeamento / redução em java. Mas também sei que uma linguagem de script como php também pode ser usada. No entanto, quase todo mundo recomenda java ou python. Atualmente trabalho em php. Então, eu queria ...
No Hadoop, onde a estrutura salva a saída da tarefa Mapa em um aplicativo Map-Reduce norma
Estou tentando descobrir onde a saída de uma tarefa de Mapa é salva no disco antes de poder ser usada por uma tarefa de Reduçã Nota - a versão usada é o Hadoop 0.20.204 com a nova API Por exemplo, ao substituir o método de mapa na classe ...
classe @Hadoop JobConf está obsoleta, precisa de um exemplo atualizado
Estou escrevendo programas hadoop, e realmente não quero brincar com aulas obsoletas. Em qualquer lugar on-line, não consigo encontrar programas com org.apache.hadoop.conf.Configuration class insted de ...
DataNode falha ao iniciar no Hadoop
Eu estou tentando instalar o Hadoop no Ubuntu 11.04 e Java 6 sun. Eu estava trabalhando com o hadoop 0.20.203 rc1 build. Estou repetidamente executando um problema no Ubuntu 11.04 com java-6-sun. Quando tento iniciar o hadoop, o tipo de dados não ...
como sintonizar mapred.reduce.parallel.copies?
Seguindo a leiturahttp: //gbif.blogspot.com/2011/01/setting-up-hadoop-cluster-part-1-manual.htm [http://gbif.blogspot.com/2011/01/setting-up-hadoop-cluster-part-1-manual.html] queremos experimentar com mapred.reduce.parallel.copie O blog ...
MapReduce alternativas
Existem paradigmas alternativos para o MapReduce (Google, Hadoop)? Existe outra maneira razoável de dividir e mesclar grandes problemas?
Hadoop: como acessar (muitas) imagens fotográficas a serem processadas por mapa / redução?
Tenho mais de 10 milhões de fotos salvas no sistema de arquivos local. Agora eu quero passar por cada um deles para analisar o binário da foto para ver se é um cachorro. Eu basicamente quero fazer a análise em um ambiente hadoop em cluster. O ...
Hadoop: Exemplo de processo para gerar um SequenceFile com binários de imagem a serem processados no mapa / reduzir
SegueHadoop: como acessar (muitas) imagens fotográficas a serem processadas por mapa / redução? [https://stackoverflow.com/questions/8752772/hadoop-how-to-access-many-photo-images-to-be-processed-by-map-reduce] pergunta, onde ...
Configurando o nível de log no Hadoop para WARN
Tentei várias maneiras de definir o nível de log no Hadoop para WARN, mas sempre falhava. Primeiramente, tentei configurar o arquivo log4j.properties simplesmente substituindo "INFO" por "WARN" em todos os lugares. Nenhum resultado. Próximo, ...