Was ist ein besserer Ansatz zum Speichern und Abfragen eines großen Datensatzes meteorologischer Daten?

Ich suche nach einer bequemen Möglichkeit, eine große Menge meteorologischer Daten (wenige TB) zu speichern und abzufragen. Weitere Informationen zur Art der...

Probleme mit R und HDF5

Ich versuche, ein hdf5 in R zu laden und stoße auf einige Probleme. Hier sind die Schritte, die ich unternommen habe, um meine Umgebung zu konfigurieren:R 2....

Speichern von Pandas-Objekten zusammen mit regulären Python-Objekten in HDF5

Speichern von Wörterbüchern in eine Datei (NumPy und Python 2/3 freundlich)

Ich möchte eine hierarchische Speicherung von Schlüsselwerten in Python durchführen, die sich im Grunde auf das Speichern von Wörterbüchern in Dateien beschr...

Wie bekomme ich schnelleren Code als numpy.dot für die Matrixmultiplikation?

Schnelleres Lesen von Zeitreihen aus netCDF?

Verbessern Sie die Schreibleistung von Pandas (PyTables?) HDF5-Tabellen

Ich benutze Pandas für die Forschung jetzt seit ungefähr zwei Monaten mit großer Wirkung. Pandas + PyTables (die HDF5-Schnittstelle) bietet eine große Anzahl...

Spalte an Frame der HDF-Datei in Pandas anhängen

Ich arbeite mit einem großen Datensatz im CSV-Format. Ich versuche, die Daten spaltenweise zu verarbeiten und dann an einen Frame in einer HDF-Datei anzuhäng...

Geben Sie nach dem Entfernen von Tabellen oder Knoten mit pytables oder pandas den Festplattenspeicher für hdf5 frei

Ich benutze HDFStore mit Pandas / Pytables. Nach dem Entfernen einer Tabelle oder eines Objekts bleibt die Größe der hdf5-Datei unverändert. Es scheint, dass dieser Speicherplatz später wiederverwendet wird, wenn zusätzliche Objekte zum ...

Von Python erstellter HDF5-Datensatz in Matlab transponiert

Ich habe einige Daten, die ich zwischen Python und Matlab teile. Früher habe ich NumPy-Arrays in MATLAB-ähnlichen .mat-Dateien gespeichert, aber ich wollte zu HDF5-Datasets wechseln. Allerdings ist mir eine lustige Funktion aufgefallen: Wenn ich ...