Resultados da pesquisa a pedido "hadoop-streaming"

0 a resposta

Deslocamento de byte do mapeador de streaming do Hadoop não sendo gerado

Estou executando um fluxo de trabalho do Hadoop e os deslocamentos de byte não estão sendo gerados como saída (chaves) do mapeador, como eu esperaria também....

1 a resposta

DiskErrorException na máquina escrava - multinode Hadoop

Eu estou tentando processar arquivos XML do hadoop, eu tenho seguinte erro em invocar o trabalho de contagem de palavras em arquivos XML.

1 a resposta

Como obter o nome do arquivo de um trabalho de mapreduce de streaming no R?

Estou transmitindo um trabalho de mapreduce R e preciso obter o nome do arquivo. Sei que o Hadoop define variáveis de ambiente para o trabalho atual antes de iniciar e posso acessar envios no R com Sys.getenv (). Eu encontrei :Obter nome do ...

1 a resposta

Como definir o número máximo preciso de tarefas em execução simultânea por nó no Hadoop 2.4.0 no Elastic MapReduce

De acordo com http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/ [http://blog.cloudera.com/blog/2014/04/apache-hadoop-yarn-avoiding-6-time-consuming-gotchas/] , a fórmula para determinar o número de ...

1 a resposta

O comando hdfs foi descontinuado no hadoop

Como estou seguindo o procedimento ...

1 a resposta

Erro de streaming do Python Hadoop “ERROR streaming.StreamJob: o trabalho não foi bem-sucedido!” E rastreamento de pilha: ExitCodeException exitCode = 134

Estou tentando executar o script python no cluster Hadoop usando o Hadoop Streaming para análise de sentimentos. O mesmo script que estou executando na máquina local que está executando corretamente e está fornecendo saída. para rodar na máquina ...

1 a resposta

Cluster do Hadoop - Preciso replicar meu código em todas as máquinas antes de executar o trabalh

Isso é o que me confunde, quando eu uso o exemplo de contagem de palavras, eu mantenho o código no mestre e deixo que ele faça coisas com os escravos e ele funciona bem Mas quando estou executando meu código, ele começa a falhar nos ...

2 a resposta

Tabela dinâmica com Apache Pig

Eu me pergunto se é possível girar uma mesa em um passe no Apache Pig.Entrada:

2 a resposta

Como especificar o particionador para streaming de hadoop

Eu tenho um particionador personalizado como abaixo:

2 a resposta

Hive FAILED: a linha ParseException 2: 0 não pode reconhecer a entrada próxima a '' macaddress '' 'CHAR' '(' na especificação da coluna

Eu tentei correrhive -v -f sqlfile.sql Aqui está o conteúdo do arquivo CREATE TABLE UpStreamParam ( 'macaddress' CHAR(50), 'datats' BIGINT, 'cmtstimestamp' BIGINT, 'modulation' INT, 'chnlidx' INT, 'severity' BIGINT, 'rxpower' FLOAT, 'sigqnoise' ...