Resultados de la búsqueda a petición "hdf5"

2 la respuesta

H5py store list of list of strings

¿Existe la posibilidad en h5py de crear un conjunto de datos que consista en listas de cadenas? Intenté crear un tipo de datos anidado de longitud variable, pero esto da como resultado un error de segmentación en mi intérprete de Python. def ...

1 la respuesta

¿Cómo importar un archivo gzip mayor que el límite de RAM en un Pandas DataFrame? "Kill 9" ¿Usa HDF5?

tengo ungzip que es de aproximadamente 90 GB. Esto está bien dentro del espacio en disco, pero mucho más grande que la RAM. ¿Cómo puedo importar esto a un marco de datos de pandas? Intenté lo siguiente en la línea de comando: # start with ...

1 la respuesta

¿Puedo almacenar mi propio objeto de clase en hdf5?

Tengo una clase como esta: class C: def __init__(self, id, user_id, photo): self.id = id self.user_id = user_id self.photo = photoNecesito crear millones de estos objetos. id es un número entero así como user_id, pero la foto es una matriz bool ...

1 la respuesta

Cómo agregar datos a un conjunto de datos específico en un archivo hdf5 con h5py

Estoy buscando la posibilidad de agregar datos a un conjunto de datos existente dentro de un archivo h5 usando python (h5py). Una breve introducción a mi proyecto: trato de entrenar a una CNN utilizando datos de imágenes médicas. Debido a la ...

3 la respuesta

Conjunto de datos HDF5 creado por Python transpuesto en Matlab

Tengo algunos datos que comparto entre Python y Matlab. Solía hacerlo guardando matrices NumPy en archivos .mat de estilo MATLAB, pero me gustaría cambiar a conjuntos de datos HDF5. Sin embargo, noté una característica divertida: cuando guardo ...

2 la respuesta

ubicaciones de biblioteca compartidas para archivos mex de matlab:

Estoy tratando de escribir una función matlab mex que use libhdf5; Mi instalación de Linux proporciona bibliotecas y encabezados compartidos libhdf5-1.8. Sin embargo, mi versión de Matlab, r2007b, proporciona un libhdf5.so de la versión 1.6. ...

1 la respuesta

Almacenamiento de matriz de longitud variable multidimensional con h5py

Estoy tratando de almacenar una lista de matrices de longitud variable en un archivo HDF con el siguiente procedimiento: phn_mfccs = [] # Import wav files for waveform in files: phn_mfcc = mfcc(waveform) # produces a variable length multidim ...

2 la respuesta

HDF5 rowmajor o colmajor

¿Es posible saber si una matriz almacenada en formato HDF5 está en RowMajor o ColMajor? Por ejemplo, cuando guardo matrices de octava, que las almacena internamente como ColMajor, necesito transponerlas cuando las leo en mi código C, donde las ...

1 la respuesta

¿Cómo copiar parcialmente usando Python un archivo Hdf5 en uno nuevo manteniendo la misma estructura?

Tengo un gran archivo hdf5 que se parece a esto: A/B/dataset1, dataset2 A/C/dataset1, dataset2 A/D/dataset1, dataset2 A/E/dataset1, dataset2... Quiero crear un nuevo archivo solo con eso: A / B / dataset1, dataset2 A / C / dataset1, ...

2 la respuesta

Guardar en hdf5 es muy lento (congelación de Python)

Estoy tratando de guardar los valores de cuello de botella en un archivo hdf5 recién creado. Los valores del cuello de botella vienen en lotes de forma(120,10,10, 2048). Guardar un solo lote está ocupando más de 16 conciertos y Python parece ...