Resultados da pesquisa a pedido "mapreduce"
Encontre a contagem máxima de registros consecutivos com base em um campo no Mongodb Query
Quero encontrar a contagem máxima de registros consecutivos com base em um campo específico. Minhasdb.people A coleção após encontrar a classificação com base no campo é: > db.people.find().sort({ updated_at: 1}) { "_id" : 1, "name" : "aaa", ...
Qual é o número ideal de redutores no Hadoop?
Conforme fornecido pelo wiki do Hadoop, para calcular o número ideal de redutores é 0,95 ou 1,75 * (nós * mapred.tasktracker.tasks.maximum) masquando escolher 0,95 e quando 1,75? qual é o fator que considerou ao decidir esse multiplicador?
Como acessar os contadores do Mapper / Reducer no estágio Output?
Eu tenho alguns contadores que criei na minha classe Mapper: (exemplo escrito usando a biblioteca Java appengine-mapreduce v.0.5) @Override public void map(Entity entity) { getContext().incrementCounter("analyzed"); if ...
Erro ao executar o Mapreduce (fios) no eclipse do windows
Estou executando um programa WordCount no meu eclipse. Eu tentei com o Hadoop1.x ele está funcionando bem. Problema enfrentado durante a execução no hadoop2.x Eu tentei 1) adicionou todos os xml no meu caminho de classe. 2) também ...
MongoDb: Encontre elemento comum de duas matrizes em uma consulta
Digamos que temos registros da seguinte estrutura no banco de dados. { "_id": 1234, "tags" : [ "t1", "t2", "t3" ] }Agora, quero verificar se o banco de dados contém um registro com alguma das tags especificadas na matriztagsArray which is [ ...
Como inserir um arquivo HDFS no R mapreduce para processamento e obter o resultado no arquivo HDFS
Eu tenho uma pergunta semelhante ao link abaixo no stackoverflow R + Hadoop: Como ler o arquivo CSV do HDFS e executar o ...
hadoop java.net.URISyntaxException: caminho relativo no URI absoluto: rsrc: hbase-common-0.98.1-hadoop2.jar
Eu tenho um trabalho de redução de mapa que se conecta ao HBASE e não consigo descobrir onde estou executando esse erro: Exception in thread "main" java.lang.reflect.InvocationTargetException ...
Mapa do Hadoop Reduzir a leitura de um arquivo de texto
Estou tentando escrever um programa MapReduce que pode ler um arquivo de entrada e gravar a saída em outro arquivo de texto. Estou planejando usar a classe BufferedReader para isso. Mas eu realmente não sei como usá-lo em um ...
Mapeie os frascos do cliente para o hadoop 2.4.1 no eclipse
Quando eu corro meuhadoop mapreduce word count jar nohadoop pasta no shell, está funcionando corretamente e a saída é gerada corretamente, Desde que eu usoyarn no caso dehadoop 2.4.1, quando eu corro do eclipse paraMapReduce Sample program, ...
Hadoop 2.6.0: Erro básico ao iniciar o MRAppMaster após a instalação
Comecei a trabalhar com o Hadoop 2. Depois de instalar com configurações básicas, sempre falhava ao executar quaisquer exemplos. Alguém viu esse problema e por favor me ajude? E o erro é algo como Error starting MRAppMaster ...