Resultados da pesquisa a pedido "hdfs"
Falta o caractere de nova linha?
Copiei um arquivo do HDFS para o meu sistema de arquivos local (tudo no RH linux). No entanto, após a cópia, se eucat o arquivo, vejo o seguinte: [me@ac12 ~]$ cat file_copy 0|name|string 1|phone|string 2|age|string[me@ac12 ~]$ O que eu esperava ...
Abrindo um arquivo armazenado no HDFS para editar no VI
Eu gostaria de editar um arquivo de texto diretamente no HDFS usando o VI sem precisar copiá-lo para o local, editá-lo e copiá-lo novamente do local. Isso é possível? Edit: Isso costumava ser possível na interface do usuário do Cloudera Hue, ...
imagem de espaço para nome e log de edição
Do livro "Hadoop O Guia Definitivo", sob o tópicoNamenodes e Datanodesé mencionado que: O namenode gerencia o espaço para nome do sistema de arquivos. Ele mantém a árvore do sistema de arquivos e os metadados para todos os arquivos e ...
Execute o hadoop no Mac OS
Eu tento configurar para executar o Hadoop no Mac OS combrew. Os passos dados são fornecidos abaixo, instalarhadoop com o comando$brew install hadoopDentro da pastausr/local/Cellar/hadoop/3.1.0/libexec/etc/hadoop e adicionou os comandos ...
Como você pode procurar todas as tabelas com um determinado nome de coluna e retornar quais tabelas têm esse nome de coluna no Hadoop / Hive?
Estou procurando encontrar todas as tabelas que contêm um determinado nome de coluna no HDFS / Hive?
O nó / hbase não está no ZooKeeper
Sou novato no Hadoop tentando instalar o Hbase no modo pseudo-distribuído, versão hbase-0.98.10.1-hadoop1-bin, com o Hadoop 2.5.2. Não consigo adicionar uma tabela. O erro a seguir continua quando tento criar uma ...
Como posso criar um novo diretório em hdfs com java?
public static void main(String[] args) throws IOException, URISyntaxException {Configuration config = new Configuration (); config.set("fs.default.name","hdfs://127.0.0.1:50070/dfshealth.jsp"); FileSystem dfs = FileSystem.get(config); String ...
Transmissão Spark: HDFS
Não consigo fazer meu trabalho do Spark transmitir arquivos "antigos" do HDFS.Se meu trabalho do Spark estiver desativado por algum motivo (por exemplo, demonstração, implantação), mas a gravação / migração para o diretório HDFS for contínua, eu ...
Alterar o tamanho do bloco dos arquivos existentes no Hadoop
Considere um cluster hadoop em que o tamanho padrão do bloco é de 64 MBhdfs-site.xml. No entanto, mais tarde, a equipe decide alterar isso para 128 MB. Aqui estão minhas perguntas para o cenário acima? Essa alteração exigirá a reinicialização do ...
NameNode HA ao usar hdfs: // URI
Com esquema de URI HDFS ou HFTP (por exemplo,hdfs://namenode/path/to/file) Posso acessar clusters HDFS sem exigir seus arquivos de configuração XML. É muito útil ao executar comandos do shell comohdfs dfs -get, hadoop distcp ou lendo arquivos do ...