Resultados da pesquisa a pedido "hdfs"
ator de replicação HDFS
Quando estou carregando um arquivo no HDFS, se eu definir o fator de replicação como 1, os splits de arquivos residirão em uma única máquina ou os splits serão distribuídos para várias máquinas na rede? hadoop fs -D dfs.replication=1 ...
Diferença entre hadoop fs -put e hadoop fs -copyFromLocal
-put e-copyFromLocal são documentados como idênticos, enquanto a maioria dos exemplos usa a variante detalhada -copyFromLocal. Por quê A mesma coisa para-get e-copyToLocal
Pesquisa do fado Hadoop para o tamanho do bloc
No Hadoop fs, como procurar o tamanho do bloco para um arquivo específic Eu estava interessado principalmente em uma linha de comando, algo como: hadoop fs ... hdfs://fs1.data/... Mas parece que isso não existe. Existe uma solução Java?
rquivos pequenos e blocos HD
Um bloco no Hadoop Distributed File System armazena vários arquivos pequenos ou um bloco armazena apenas 1 arquivo?
Hadoop: como acessar (muitas) imagens fotográficas a serem processadas por mapa / redução?
Tenho mais de 10 milhões de fotos salvas no sistema de arquivos local. Agora eu quero passar por cada um deles para analisar o binário da foto para ver se é um cachorro. Eu basicamente quero fazer a análise em um ambiente hadoop em cluster. O ...
Hadoop: Exemplo de processo para gerar um SequenceFile com binários de imagem a serem processados no mapa / reduzir
SegueHadoop: como acessar (muitas) imagens fotográficas a serem processadas por mapa / redução? [https://stackoverflow.com/questions/8752772/hadoop-how-to-access-many-photo-images-to-be-processed-by-map-reduce] pergunta, onde ...
eplicação HDFS - Dados Armazenados
Sou um novato em relação ao hadoop e quero entender melhor como a replicação funciona no HDF Diga que eu tenho um sistema de 10 nós (1 TB cada nó), fornecendo uma capacidade total de 10 TB. Se eu tiver um fator de replicação 3, tenho 1 ...