Resultados da pesquisa a pedido "hadoop2"

5 a resposta

Colocar arquivo no HDFS com espaços no nome

Eu tenho um arquivo chamadofile name(1).zip (com o espaço e parênteses) e eu quero colocar esse arquivo no HDFS. Mas sempre que tento colocá-lo viahadoop fs -put ... , Recebo uma exceção. Eu até tentei adicionar aspas ao arquivo e até tentei ...

3 a resposta

Não foi possível localizar ou carregar a classe principal com.sun.tools.javac.Main hadoop mapreduce

Estou tentando aprender o MapReduce, mas estou um pouco perdido no ...

20 a resposta

Hadoop “Não é possível carregar a biblioteca nativa do hadoop para sua plataforma”

Estou atualmente configurando o hadoop em um servidor executandoCentOs. Quando eu corro

2 a resposta

Como o hadoop decide quantos nós mapeará e reduzirá as tarefas

Eu sou novo no hadoop e estou tentando entender. Estou falando do hadoop 2. Quando tenho um arquivo de entrada que gostaria de fazer um MapReduce, no programa MapReduce digo o parâmetro do Split, para que ele execute tantas tarefas de mapa quanto ...

1 a resposta

Configurando o Spark como mecanismo de execução padrão para o Hive

Hadoop 2.7.3, Spark 2.1.0 e Hive 2.1.1. Estou tentando definir o spark como mecanismo de execução padrão para o hive. Carreguei todos os frascos em $ SPARK_HOME / jars na pasta hdfs e copiei os frascos comuns de scala-library, spark-core e ...

1 a resposta

O comando hdfs foi descontinuado no hadoop

Como estou seguindo o procedimento ...

1 a resposta

O que é memória reservada no fio

Consegui iniciar um aplicativo spark no Yarn. No entanto, o uso de emory é meio estranho, como você pode ver abaixo: http://imgur.com/1k6VvSI [http://imgur.com/1k6VvSI] O que significa memória reservada? Como posso usar com eficiência toda a ...

1 a resposta

imagem de espaço para nome e log de edição

Do livro "Hadoop O Guia Definitivo", sob o tópicoNamenodes e Datanodesé mencionado que: O namenode gerencia o espaço para nome do sistema de arquivos. Ele mantém a árvore do sistema de arquivos e os metadados para todos os arquivos e ...

2 a resposta

Aplicativos não mostrados na interface do usuário do fio ao executar o trabalho mapreduce hadoop?

estou usandoHadoop2.2. Vejo que meus trabalhos são concluídos com sucesso. Eu posso navegar no sistema de arquivos para encontrar a saída. No entanto, quando eu navegohttp://NNode:8088/cluster/apps, Não consigo ver os aplicativos que foram ...

1 a resposta

Como as consultas sql do hive são enviadas como trabalho de sr do hive cli

Implantei um cluster CDH-5.9 com o MR como mecanismo de execução de seção. Eu tenho uma tabela de seção chamada "usuários" com 50 linhas. Sempre que executo a consultaselect * from users funciona bem da seguinte maneira: hive> select * from ...