Результаты поиска по запросу "pytables"
ptrepack sortby нужен полный индекс
Я пытаюсь повторно упаковать файл HDF, созданный с помощью интерфейса ptables HDFStore pytables. Основным индексом датафрейма было время, но я сделал еще несколько столбцовdata_columns так что я могу фильтровать данные на диске через эти ...
Сохранение словарей в файл (numpy и Python 2/3 friendly)
Я хочу создать иерархическое хранилище значений ключей в Python, которое сводится к хранению словарей в файлах. Под этим я подразумеваю любой тип структуры словаря, который может содержать другие словари, числовые массивы, сериализуемые объекты ...
Есть ли преимущество в скорости анализа или использовании памяти при использовании HDF5 для хранения больших массивов (вместо плоских двоичных файлов)?
Я обрабатываю большие 3D-массивы, которые мне часто приходится разрезать различными способами для анализа данных. Типичный «куб» может быть ~ 100 ГБ (и, скор...
PyTables + Pandas Выбор проблем
У меня есть файл HDF5 (PyTables), структурированный так:
Повышение производительности записи таблиц HDF5 для панд (PyTables?)
Я пользуюсь пандами для исследований уже около двух месяцев, чтобы получить отличный эффект. С большим количеством наборов данных трассировки среднего размера pandas + PyTables (интерфейс HDF5) выполняет огромную работу, позволяя мне обрабатывать ...
Этот работал для меня на MAC :-)
анавливаю Python 2.7 в дополнение к 2.7. При повторной установке PyTables для 2.7 я получаю эту ошибку - Найден numpy 1.5.1 установленный пакет. .. ОШИБКА :: Не удалось найти локальную установку HDF5. Возможно, вам придется явно указать, где ...
И понизить до Python 3.5
еге pd.read_hdf('myfile.h5') Я получаю следующую ошибку трассировки: [[... немного дольше прослеживается]] ~ / .local / lib / python3.6 / site-packages / pandas / io / pytables.py в read_array (self, key, start, stop) 2487 2488, если ...
Умножение матриц с использованием hdf5
Я пытаюсь умножить 2 большие матрицы с ограничением памяти, используя hdf5 (pytables), но функция numpy.dot, кажется, дает мне ошибку: Valueerror: массив слишком большой Мне нужно сделать матричное умножение самостоятельно, возможно, блочно, ...
Как получить более быстрый код, чем numpy.dot для умножения матриц?
ВотУмножение матриц с использованием hdf5 [https://stackoverflow.com/questions/19684575/matrix-multiplication-using-hdf5]Я использую hdf5 (pytables) для умножения больших матриц, но я был удивлен, потому что, используя hdf5, он работает даже ...
Вопрос для вставки с помощью psycopg
Я читаю данные из файла .mat с помощью модуля Pytables. После прочтения данных, я хочу вставить эти данные в базу данных с помощью psycopg. Вот пример кода: file = tables.openFile(matFile) x = 0 #populate the matData list for var in dest: data = ...