Resultados da pesquisa a pedido "sequencefile"

1 a resposta

Escreva e leia matrizes de bytes brutos no Spark - usando o arquivo de sequência SequenceFile

Como você escreveRDD[Array[Byte]] para um arquivo usando o Apache Spark e lê-lo novamente?

6 a resposta

hadoop mapreduce: java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy () Z

Estou tentando escrever um arquivo de sequência compactada de blocos de snappy a partir de um trabalho de redução de mapa. Estou usando o hadoop 2.0.0-cdh4.5.0 e o snappy-java 1.0.4.1 Aqui está o meu código: package jinvestor.jhouse.mr; import ...

1 a resposta

Como posso usar o código da API do arquivo sequencial do Mahout?

Existe no Mahout um comando para criar o arquivo de sequência como

4 a resposta

Hadoop HDFS: Leia os arquivos de sequência que estão sendo gravados

1 a resposta

Estender SequenceFileInputFormat para incluir o nome do arquivo + deslocamento

Eu gostaria de ser capaz de criar um InputFormat personalizado que lê arquivos de seqüência, mas adicionalmente expõe o caminho do arquivo e deslocamento den...

1 a resposta

Convertendo CSV para SequenceFile

Eu tenho um arquivo CSV que gostaria de converter em um SequenceFile, que eu usaria para criar NamedVectors para usar em um trabalho de cluster. Eu tenho usa...

1 a resposta

usando o pyspark, leia / grave imagens 2D no sistema de arquivos hadoop

Quero poder ler / gravar imagens em um sistema de arquivos hdfs e aproveitar a localidade hdfs. Eu tenho uma coleção de imagens onde cada imagem é composta por Matrizes 2D de uint16informações adicionais básicas armazenadas como um ...