Resultados de la búsqueda a petición "h5py"

2 la respuesta

¿Cómo establecer la configuración de la memoria caché utilizando la interfaz de alto nivel h5py?

Estoy intentando aumentar el tamaño del caché para mis archivos HDF5, pero no parece estar funcionando. Esto es lo que tengo:

2 la respuesta

Entradas y salidas de arrays numpy a h5py

1 la respuesta

¿Cuál es la compresión recomendada para HDF5 para un rendimiento de lectura / escritura rápido (en Python / pandas)?

He leído varias veces que activar la compresión en HDF5 puede conducir a un mejor rendimiento de lectura / escritura. Me pregunto qué configuración ideal puede ser para lograr un buen rendimiento de lectura / escritura en: data_df.to_hdf(..., ...

3 la respuesta

Compruebe si el nodo existe en h5py

2 la respuesta

Ahorro con matrices h5py de diferentes tamaños

Estoy tratando de almacenar alrededor de 3000 matrices numpy usando el formato de datos HDF5. Las matrices varían en longitud de 5306 a 121999 np.float64 estoy obteniendoObject dtype dtype('O') has no native HDF5 equivalent error ya que debido a ...

1 la respuesta

Cómo agregar datos a un conjunto de datos específico en un archivo hdf5 con h5py

Estoy buscando la posibilidad de agregar datos a un conjunto de datos existente dentro de un archivo h5 usando python (h5py). Una breve introducción a mi proyecto: trato de entrenar a una CNN utilizando datos de imágenes médicas. Debido a la ...

1 la respuesta

Escribir un gran conjunto de datos hdf5 usando h5py

Por el momento, estoy usando h5py para generar conjuntos de datos hdf5. Tengo algo como esto import h5py import numpy as np my_data=np.genfromtxt("/tmp/data.csv",delimiter=",",dtype=None,names=True) myFile="/tmp/f.hdf" with h5py.File(myFile,"a") ...

3 la respuesta

Conjunto de datos HDF5 creado por Python transpuesto en Matlab

Tengo algunos datos que comparto entre Python y Matlab. Solía hacerlo guardando matrices NumPy en archivos .mat de estilo MATLAB, pero me gustaría cambiar a conjuntos de datos HDF5. Sin embargo, noté una característica divertida: cuando guardo ...

1 la respuesta

¿Cómo copiar parcialmente usando Python un archivo Hdf5 en uno nuevo manteniendo la misma estructura?

Tengo un gran archivo hdf5 que se parece a esto: A/B/dataset1, dataset2 A/C/dataset1, dataset2 A/D/dataset1, dataset2 A/E/dataset1, dataset2... Quiero crear un nuevo archivo solo con eso: A / B / dataset1, dataset2 A / C / dataset1, ...

1 la respuesta

fuera del núcleo de almacenamiento de imágenes 4D tif como hdf5 python

Tengo 27 GB de archivos tiff 2D que representan segmentos de una película de imágenes 3D. Quiero poder dividir estos datos como si fuera una simple matriz numpy4d. Parece que dask.array es una buena herramienta para manipular limpiamente la ...