Resultados da pesquisa a pedido "hdf5"
TensorFlow - tf.data.Dataset lendo grandes arquivos HDF5
Estou configurando um pipeline TensorFlow para ler grandes arquivos HDF5 como entrada para meus modelos de aprendizado profundo. Cada arquivo HDF5 contém 100 vídeos de tamanho variável armazenados como uma coleção de imagens JPG compactadas (para ...
Salvar no hdf5 é muito lento (congelamento do Python)
Estou tentando salvar valores de gargalo em um arquivo hdf5 recém-criado. Os valores de gargalo vêm em lotes de forma(120,10,10, 2048). Salvar um lote sozinho está ocupando mais de 16 shows e o python parece estar congelando nesse lote. Com base ...
Experiência com o uso do h5py para realizar trabalho analítico em big data em Python?
Eu faço muito trabalho estatístico e uso o Python como minha linguagem principal. Alguns dos conjuntos de dados com os quais trabalho podem levar 20 GB de memória, o que impossibilita a operação usando funções na memória numpy, scipy e PyIMSL. A ...
Salvar no hdf5save cria um arquivo ilegível
Estou tentando salvar uma matriz como um arquivo HDF5 usando R, mas não tendo sorte. Para tentar diagnosticar o problema, executeiexample(hdf5save). Isso criou com sucesso um arquivo HDF5 que eu poderia ler facilmente comh5dump. Quando executei ...
Importar um enorme conjunto de dados sem imagem no TensorFlow
Eu tenho um grande conjunto de dados (300.000 exemplos x 33.000 recursos), que obviamente não se encaixam na memória. Os dados são salvos no formato HDF5. Os valores são principalmente zeros (dados esparsos). Eles se parecem com isso: Attr1 52 ...
Instalando o h5py no OS X
Passei o dia tentando obter oh5py módulo de python funcionando, mas sem sucesso. Instalei as bibliotecas compartilhadas do HDF5 e segui as instruções que encontrei na Web para fazer o correto. Mas isso não funciona, abaixo está a mensagem de ...
Lendo uma string de hdf5 em C ++
Eu estou lendo em conjuntos de dados de um arquivo H5 no Microsoft Visual C ++ 2008. Tudo funciona bem para dados do tipo int e duplo, mas me deparo com prob...
Leitura mais rápida de séries temporais do netCDF?
Eu tenho alguns arquivos netCDF grandes que contêm 6 dados por hora para a terra em resolução de 0,5 grau.Existem 360 pontos de latitude, 720 pontos de longi...
Conjunto de dados HDF5 criado em Python transposto no Matlab
Eu tenho alguns dados que eu compartilho entre Python e Matlab. Eu costumava fazer isso salvando matrizes NumPy em arquivos .mat no estilo MATLAB, mas gostaria de mudar para conjuntos de dados HDF5. No entanto, notei um recurso engraçado: ao ...
IOError: Não é possível ler dados (Não é possível abrir o diretório) - Filtro de compactação gzip ausente
Eu nunca trabalhei com arquivos HDF5 antes e, para começar, recebi alguns arquivos de exemplo. Estive verificando todos os conceitos básicos comh5py, observando os diferentes grupos nesses arquivos, seus nomes, chaves, valores e assim por diante. ...