Resultados da pesquisa a pedido "hdf5"
Anexando Coluna ao Quadro do Arquivo HDF nos Pandas
Eu estou trabalhando com um grande conjunto de dados no formato CSV. Estou tentando processar os dados coluna por coluna e, em seguida, anexar os dados a um ...
Armazenando uma matriz multidimensional de comprimento variável com o h5py
Estou tentando armazenar uma lista de matrizes de comprimento variável em um arquivo HDF com o seguinte procedimento: phn_mfccs = [] # Import wav files for waveform in files: phn_mfcc = mfcc(waveform) # produces a variable length multidim array ...
Como anexar dados a um conjunto de dados específico em um arquivo hdf5 com o h5py
Estou procurando uma possibilidade de acrescentar dados a um conjunto de dados existente dentro de um arquivo h5 usando python (h5py). Uma breve introdução ao meu projeto: tento treinar uma CNN usando dados de imagens médicas. Devido à enorme ...
Salvar no hdf5 é muito lento (congelamento do Python)
Estou tentando salvar valores de gargalo em um arquivo hdf5 recém-criado. Os valores de gargalo vêm em lotes de forma(120,10,10, 2048). Salvar um lote sozinho está ocupando mais de 16 shows e o python parece estar congelando nesse lote. Com base ...
Experiência com o uso do h5py para realizar trabalho analítico em big data em Python?
Eu faço muito trabalho estatístico e uso o Python como minha linguagem principal. Alguns dos conjuntos de dados com os quais trabalho podem levar 20 GB de memória, o que impossibilita a operação usando funções na memória numpy, scipy e PyIMSL. A ...
TensorFlow - tf.data.Dataset lendo grandes arquivos HDF5
Estou configurando um pipeline TensorFlow para ler grandes arquivos HDF5 como entrada para meus modelos de aprendizado profundo. Cada arquivo HDF5 contém 100 vídeos de tamanho variável armazenados como uma coleção de imagens JPG compactadas (para ...
Salvar no hdf5save cria um arquivo ilegível
Estou tentando salvar uma matriz como um arquivo HDF5 usando R, mas não tendo sorte. Para tentar diagnosticar o problema, executeiexample(hdf5save). Isso criou com sucesso um arquivo HDF5 que eu poderia ler facilmente comh5dump. Quando executei ...
MATLAB: Salvar várias variáveis em arquivos -v7.3 ”(HDF5) .mat parece ser mais rápida ao usar o sinalizador“ -append ”. Por quê?
NOTA: Esta pergunta lida com um problema observado em 2011 com uma versão antiga do MATLAB (R2009a). Conforme a atualização abaixo de julho de 2016, o problema / bug no MATLAB parece não existir mais (testado com o R2016a; role para baixo até o ...
MATLAB: Diferenças entre versões .mat
odocumentação oficial [http://www.mathworks.com/help/matlab/ref/save.html#inputarg_version]declara o seguinte: . Mas notei que existem outras diferenças importantes além das indicadas na tabela acima. Por exemplo, salvar uma matriz de células ...
Libere a memória de disco hdf5 após a remoção da tabela ou do nó com pytables ou pandas
Estou usando o HDFStore com pandas / pytables. Após remover uma tabela ou objeto, o tamanho do arquivo hdf5 permanece inalterado. Parece que esse espaço é reutilizado posteriormente quando objetos adicionais são adicionados ao armazenamento, mas ...