Resultados de la búsqueda a petición "hdf5"
escrituras incrementales en hdf5 con h5py
Tengo una pregunta sobre cómo escribir mejor en archivos hdf5 con python / h5py. Tengo datos como: ----------------------------------------- | timepoint | voltage1 | voltage2 | ... ----------------------------------------- | 178 | 10 | 12 | ...
ImportError HDFStore requiere PyTables No hay módulos con nombre en tablas
import pandas as pd dfs = pd.HDFStore('xxxxx.h5')arroja este error: "ImportError: HDFStore requires PyTables, "No module named tables" problem importing" Intenté instalar PyTables, que requiere Cython. Tengo instalado Cython 0.21, pero arroja ...
IOError: No se pueden leer los datos (No se puede abrir el directorio) - Falta el filtro de compresión gzip
Nunca antes había trabajado con archivos HDF5 y, para comenzar, recibí algunos archivos de ejemplo. He estado revisando todos los conceptos básicos conh5py, mirando los diferentes grupos en estos archivos, sus nombres, claves, valores, etc. Todo ...
Error de construcción de C ++ para un código simple usando las bibliotecas armadillo y hdf5
Soy bastante nuevo en C ++ y armadillo, y me quedo atascado con un error de construcción que se describe a continuación. Estoy tratando de probar el siguiente código simple para guardar una matriz de armadillo como archivo hdf5: #include ...
TensorFlow - tf.data.Dataset leyendo grandes archivos HDF5
Estoy configurando una tubería de TensorFlow para leer grandes archivos HDF5 como entrada para mis modelos de aprendizaje profundo. Cada archivo HDF5 contiene 100 videos de tamaño variable almacenados como una colección de imágenes JPG ...
¿Experiencia con el uso de h5py para hacer trabajo analítico en big data en Python?
Hago mucho trabajo estadístico y uso Python como mi idioma principal. Sin embargo, algunos de los conjuntos de datos con los que trabajo pueden ocupar 20 GB de memoria, lo que hace que sea casi imposible operarlos utilizando funciones en memoria ...
Cerrar un archivo de datos h5py abierto
En nuestro laboratorio almacenamos nuestros datos enhdf5 archivos a través del paquete pythonh5py. Al comienzo de un experimento creamos unhdf5 archivar y almacenar matriz tras matriz de matriz de datos en el archivo (entre otras cosas). Cuando ...
Descubriendo claves usando h5py en python3
Enpython2.7, Puedo analizar unhdf5 uso de claves de archivos $ python >>> import h5py >>> f = h5py.File('example.h5', 'r') >>> f.keys() [u'some_key']Sin embargo, enpython3.4, Obtengo algo diferente: $ python3 -q >>> import h5py >>> f = ...
¿Cuál es la compresión recomendada para HDF5 para un rendimiento de lectura / escritura rápido (en Python / pandas)?
He leído varias veces que activar la compresión en HDF5 puede conducir a un mejor rendimiento de lectura / escritura. Me pregunto qué configuración ideal puede ser para lograr un buen rendimiento de lectura / escritura en: data_df.to_hdf(..., ...
PCA incremental en big data
Acabo de intentar usar el IncrementalPCA de sklearn.decomposition, pero arrojó un MemoryError al igual que el PCA y RandomizedPCA antes. Mi problema es que la matriz que estoy tratando de cargar es demasiado grande para caber en la RAM. En este ...