Resultados da pesquisa a pedido "hadoop"
Alterando usuário em python
Estou escrevendo um script simples que reinicia um escravo hadoop. No script, eu tenho que fazer algumas alterações iniciais como usuário root. Depois disso, tenho que mudar para o usuário "hadoop" e executar um conjunto de comandos. Eu estava ...
aneiras diferentes de configurar a memória para o processo filho do TaskTracker (Mapeador e Reduzir Tarefa
Qual é a diferença entre definir o mapred.job.map.memory.mb [https://issues.apache.org/jira/browse/HADOOP-5881] e mapred.child.java.opts [http://hadoop.apache.org/common/docs/current/mapred-default.html] usando -Xmx para controlar o máximo de ...
Regex Java ou Pig para remover valores da string UserAgent
Preciso remover o terceiro e os valores subsequentes no componente 'entre parênteses' da sequência do agente do usuári Para obter Mozilla / 4.0 (compatível; MSIE 8.0) a partir d Mozilla / 4.0 (compatível; MSIE 8.0; Windows NT 6.0; Trident / ...
Treinamento da Rede Neural em paralelo, melhor usar o Hadoop ou uma GPU?
Preciso treinar uma rede neural com 2-4 camadas ocultas, ainda não tenho certeza da estrutura da rede real. Eu estava pensando em treiná-lo usando o mapa Hadoop reduzido (cluster de 12 peças) ou uma gpu para obter resultados mais rápidos. O que ...
arefas do @Hadoop: “execvp: permissão negada”
Em um pequeno cluster Hadoop configurado em várias estações de trabalho de desenvolvedor (ou seja, elas têm configurações locais diferentes), eu tenho um TaskTracker de 6 que está sendo problemático. Sempre que recebe uma tarefa, essa tarefa ...
Utilização completa de todos os núcleos no modo pseudo-distribuído do Hadoop
Estou executando uma tarefa no modo pseudo-distribuído no meu laptop de 4 núcleos. Como posso garantir que todos os núcleos sejam efetivamente usados. Atualmente, meu rastreador de tarefas mostra que apenas uma tarefa está sendo executada por ...
Diferença entre `hadoop dfs` e` hadoop fs` [fechado]
Eu vi odfs, fui para a documentação, mas não consigo entende No meu ponto de vistafs edfs trabalhando de forma semelhante. Alguém dá a diferença exata?
Pesquisa do fado Hadoop para o tamanho do bloc
No Hadoop fs, como procurar o tamanho do bloco para um arquivo específic Eu estava interessado principalmente em uma linha de comando, algo como: hadoop fs ... hdfs://fs1.data/... Mas parece que isso não existe. Existe uma solução Java?
rro de falta de memória no Hadoop
Tentei instalar o Hadoop seguindo estehttp: //hadoop.apache.org/common/docs/stable/single_node_setup.htm [http://hadoop.apache.org/common/docs/stable/single_node_setup.html] documento. Quando tentei executar este bin/hadoop jar ...
Classe de chave incorreta: o texto não é IntWritable
Isso pode parecer uma pergunta estúpida, mas não vejo o problema nos meus tipos no meu código de mapreduce para hadoop omo afirmado na pergunta, o problema é que ele está esperando IntWritable, mas estou passando um objeto Text no ...