Suchergebnisse für Anfrage "hdf5"

2 die antwort

nkrementeller PCA für Big Da

Ich habe gerade versucht, IncrementalPCA von sklearn.decomposition zu verwenden, aber es hat einen MemoryError ausgelöst, genau wie zuvor PCA und RandomizedPCA. Mein Problem ist, dass die Matrix, die ich zu laden versuche, zu groß ist, um in RAM ...

2 die antwort

Was ist die empfohlene Komprimierung für HDF5 für eine schnelle Lese- / Schreibleistung (in Python / Pandas)?

Ich habe mehrmals gelesen, dass das Aktivieren der Komprimierung in HDF5 zu einer besseren Lese- / Schreibleistung führen kann. Ich frage mich, welche idealen Einstellungen für eine gute Lese- / Schreibleistung geeignet ...

2 die antwort

Entdeckung von Schlüsseln mit h5py in python3

Impython2.7, Ich kann ein @ analysierhdf5 Dateien Schlüssel verwenden $ python >>> import h5py >>> f = h5py.File('example.h5', 'r') >>> f.keys() [u'some_key'] Jedoch inpython3.4, Ich bekomme etwas anderes: $ python3 -q >>> import h5py >>> f = ...

TOP-Veröffentlichungen

2 die antwort

Schließen Sie eine geöffnete h5py-Datendatei

n unserem Labor speichern wir unsere Daten inhdf5 Dateien durch das Python-Paketh5py. u Beginn eines Experiments erstellen wir einhdf5 file und speichere Array nach Array von Daten in der Datei (unter anderem). Wenn ein Experiment ...

12 die antwort

Wie man HDF5-Dateien in Python liest

Ich versuche, Daten aus einer hdf5-Datei in Python zu lesen. Ich kann die hdf5-Datei mit @ lesh5py, aber ich kann nicht herausfinden, wie ich auf Daten in der Datei zugreifen soll. Mein Codeimport h5py import numpy as np f1 = ...

2 die antwort

Ist die Verwendung von HDF5 für die Speicherung großer Arrays (anstelle von flachen Binärdateien) von Vorteil für die Analysegeschwindigkeit oder die Speichernutzung?

Ich verarbeite große 3D-Arrays, die ich häufig auf verschiedene Arten schneiden muss, um eine Vielzahl von Datenanalysen durchzuführen. Ein typischer "Würfel" kann ~ 100 GB groß sein (und wird wahrscheinlich in Zukunft größer werden) Es ...

1 die antwort

Mit h5py erstellte HDF5-Datei kann von h5py nicht geöffnet werden

Ich habe offenbar ohne Probleme eine HDF5-Datei unter Ubuntu 12.04 (32-Bit-Version) mit Anaconda als Python-Distribution erstellt und in ipython-Notebooks geschrieben. Die zugrunde liegenden Daten sind alle numpy Arrays. Beispielsweise import ...

3 die antwort

IOError: Daten können nicht gelesen werden (Verzeichnis kann nicht geöffnet werden) - fehlender gzip-Komprimierungsfilter

Ich habe noch nie mit HDF5-Dateien gearbeitet, und zu Beginn habe ich einige Beispieldateien erhalten. Ich habe alle Grundlagen mit @ überprüh5py, wobei die verschiedenen Gruppen in diesen Dateien, ihre Namen, Schlüssel, Werte usw. betrachtet ...

1 die antwort

C ++ - Erstellungsfehler für einen einfachen Code mit Gürteltier- und hdf5-Bibliotheken

Ich bin ziemlich neu in C ++ und Gürteltier, und ich stecke mit einem Fehler fest, der unten beschrieben wird. Ich versuche den folgenden einfachen Code zu testen, um eine Armadillo-Matrix als hdf5-Datei zu speichern: #include <iostream> ...

7 die antwort

ImportError HDFStore benötigt PyTables Kein Modul namens tables

import pandas as pd dfs = pd.HDFStore('xxxxx.h5')wirft diesen Fehler: "ImportError: HDFStore requires PyTables, "No module named tables" problem importing" Ich habe versucht, PyTables zu installieren, für das Cython erforderlich ist. Ich habe ...