Результаты поиска по запросу "pytables"

5 ответов

Сохранение словарей в файл (numpy и Python 2/3 friendly)

Я хочу создать иерархическое хранилище значений ключей в Python, которое сводится к хранению словарей в файлах. Под этим я подразумеваю любой тип структуры словаря, который может содержать другие словари, числовые массивы, сериализуемые объекты ...

1 ответ

HDFStore.append (string, DataFrame) завершается ошибкой, когда содержимое столбца строки длиннее, чем уже есть

У меня есть Pandas DataFrame, хранящийся в хранилище HDFS, в котором в основном хранятся итоговые строки о выполняемых мной тестовых прогонах Несколько полей в каждой строке содержат описательные строки переменной длины. Когда я выполняю ...

2 ответа

Итеративная запись в магазины HDF5 в Пандах

Панды [http://pandas.pydata.org/pandas-docs/dev/io.html#notes-caveats]есть следующие примеры того, как хранитьSeries, DataFrames а такжеPanelsв файлах HDF5: Подготовьте некоторые данные:In [1142]: store = HDFStore('store.h5') In [1143]: index = ...

ТОП публикаций

1 ответ

Умножение матриц с использованием hdf5

Я пытаюсь умножить 2 большие матрицы с ограничением памяти, используя hdf5 (pytables), но функция numpy.dot, кажется, дает мне ошибку:Valueerror: массив слиш...

0 ответов

HDF5 занимает больше места, чем CSV?

Рассмотрим следующий пример: Подготовьте данные:import string import random import pandas as pd matrix = np.random.random((100, 3000)) my_cols = [random.choice(string.ascii_uppercase) for x in range(matrix.shape[1])] mydf = pd.DataFrame(matrix, ...

2 ответа

Как лучше подходить для хранения и запроса большого набора данных метеорологических данных?

Я ищу удобный способ хранения и запроса огромного количества метеорологических данных (мало ТБ). Больше информации о типе данных в середине вопроса. Раньше я смотрел в сторону MongoDB (я использовал его для многих своих предыдущих проектов и ...

1 ответ

Индексация и столбцы данных в Pandas / PyTables

http://pandas.pydata.org/pandas-docs/stable/io.html#indexingЯ действительно запутался в этой концепции столбцов данных в IO Pandas HDF5. Плюс к этому очень м...

1 ответ

pandas pytables append: производительность и увеличение размера файла

У меня больше 500

1 ответ

И понизить до Python 3.5

еге pd.read_hdf('myfile.h5') Я получаю следующую ошибку трассировки: [[... немного дольше прослеживается]] ~ / .local / lib / python3.6 / site-packages / pandas / io / pytables.py в read_array (self, key, start, stop) 2487 2488, если ...

2 ответа

ptrepack sortby нужен полный индекс

Я пытаюсь повторно упаковать файл HDF, созданный с помощью интерфейса ptables HDFStore pytables. Основным индексом датафрейма было время, но я сделал еще несколько столбцовdata_columns так что я могу фильтровать данные на диске через эти ...