Вопросы по теме 'hdf5'
Сохранение в hdf5save создает нечитаемый файл
Я пытаюсь сохранить массив как файл HDF5 с помощью R, но безуспешно.
Чтобы попытаться диагностировать проблему, я запустил example(hdf5save) . В результате был успешно создан файл HDF5, который я мог легко читать с h5dump .
Когда я затем...
2057 просмотров
schedule
02.09.2023
Как разделить составной тип данных HDF5 в С++
У меня есть файл HDF5 с составным типом (int, double, double). В настоящее время я читаю его за одну операцию, сохраняя результат в массиве структур, следующих пример в документации .
Однако вместо этого я бы предпочел сохранить каждую из трех...
428 просмотров
schedule
18.09.2022
Извлечение и преобразование массива HDF5 в NumPy
У меня есть необработанные ежедневные данные о морских ветрах в формате HDF5, и я хочу знать, как преобразовать их в скорость и направление ветра с помощью Numpy？
Необработанные ежедневные данные о морских ветрах хранятся в двух файлах HDF5: u.hdf5...
1702 просмотров
schedule
27.06.2022
Проверьте, пуст ли объект хранилища HDF5?
Я использую объект pandas HDFSTore, чтобы открыть файл hdf5 и сохранить объекты DataFrame . Но прежде чем я это сделаю, я хочу узнать, пуст ли файл. Есть ли способ узнать, если мой
In[12]:
import pandas
store =...
2664 просмотров
schedule
04.12.2022
PyTables: индексация нескольких измерений больших массивов
Я анализирую некоторые данные изображения, состоящие из больших трехмерных массивов интенсивности пикселей с размерами [frame, x, y] . Поскольку они обычно слишком велики для хранения в памяти, они размещаются на жестком диске в виде массивов...
922 просмотров
schedule
10.12.2022
работа с большими научными данными на Hadoop
В настоящее время я начинаю проект под названием «Облачные вычисления для алгоритмов интеллектуального анализа временных рядов с использованием Hadoop». Данные, которые у меня есть, представляют собой файлы hdf размером более терабайта. В Hadoop, как...
4489 просмотров
schedule
11.08.2023
`таблицы установки pip` завершаются с ошибкой ERROR:: Не удалось найти локальную установку HDF5
Вот подробное сообщение об ошибке, которое я получаю, когда пытаюсь установить PyTables на Mac OSX.
calvin$ pip install tables
Downloading/unpacking tables
Downloading tables-2.4.0.tar.gz (8.9MB): 8.9MB downloaded
Running setup.py egg_info for...
8780 просмотров
schedule
30.10.2022
Исключение «HDFStore требует PyTables» при использовании файла HDF5 в iPython
Я очень новичок в Python и пытаюсь создать таблицу в пандах с HDFStore следующим образом
store = HDFStore('store.h5')
У меня исключение:
Exception Traceback (most recent call last)...
7385 просмотров
schedule
21.06.2022
Не удается обновить HDF5 с помощью yum на CentOS-5 из-за отсутствия зависимости
У меня возникли проблемы с обновлением hdf5 до 1.8.7 на CentOS-5. Ошибка, которую я получаю, приведена ниже. Мне нужно обновить, чтобы я мог установить PyTables.
Я думаю, это потому, что моя версия gdal не поддерживает более новую версию hdf5....
2394 просмотров
schedule
22.04.2023
Набор данных r hdf5 написан неправильно?
Когда я выполняю следующее, мой набор данных «предикторов» заполняется правильно:
library(rhdf5)
library(forecast)
library(sltl)
library(tseries)
fid <- H5Fcreate(output_file)
## TODO: compute the order p
p <- 4
# write predictors...
684 просмотров
schedule
03.03.2024
Модульное тестирование Python с PyTables и HDF5
Как правильно проводить модульное тестирование с файловым вводом-выводом, особенно если оно включает PyTables и HDF5?
Мое приложение развивается вокруг хранения и извлечения данных python в файлы hdf5 и из них. Пока что я просто сам пишу файлы...
697 просмотров
schedule
20.06.2023
Преобразование RAW в HDF5
Я новичок в HDF5. Я пытаюсь преобразовать необработанный файл гиперспектрального изображения в файл HDF5, но не могу найти правильный способ. Кто-нибудь знает, как конвертировать необработанный файл в файл HDF5?
Заранее спасибо.
1004 просмотров
schedule
20.12.2022
Как мне заполнить n-мерный массив в HDF5 из одномерного источника?
У меня есть массив с несколькими измерениями (x, y, каналы, z, временные шаги). Однако необработанные данные хранятся в изображении TIFF как единый стек из (x, y, каналов) с кадрами временных шагов z *.
Наконец, функция Image.getdata () Pillow...
627 просмотров
schedule
24.06.2022
c ++ получить список атрибутов hdf5
Может ли кто-нибудь помочь мне с C ++ HDF5 API и его атрибутами? Я хочу читать данные из файла HDF5, не зная всех доступных атрибутов. Поэтому я пытаюсь найти решение, чтобы получить список доступных атрибутов, но, похоже, это не обычная проблема....
375 просмотров
schedule
23.11.2022
Чтение массива строк из набора данных HDF5
Я пытаюсь прочитать набор строковых данных из файла HDF5 на С# в массив строк. Я смог прочитать набор данных, используя следующий код:
//read the no of rows and columns
var datasetID = H5D.open(fileId,"dimensions");
var dataTypeId =...
2831 просмотров
schedule
24.04.2022
Храните дату и время в HDF5 с помощью H5Py
Как я могу хранить объекты даты и времени NumPy в HDF5, используя h5py ?
In [1]: import h5py
In [2]: import numpy as np
In [3]: f = h5py.File('foo.hdfs', 'w')
In [4]: d = f.create_dataset('data', shape=(2, 2), dtype=np.datetime64)
TypeError:...
7085 просмотров
schedule
12.11.2022
Правильный способ работы со списком связанных элементов данных, связанных с несколькими значениями индекса, с помощью pandas/pytables
Мне было интересно, как правильно поступить с хранением/чтением списка элементов, таких как следующий пример, связанный с рок-звездой, где известно, что список содержит максимальное количество значений для hdf5:
Date_of_Birth
Bands[] - where the...
68 просмотров
schedule
17.03.2023
Расширение набора данных HDF5 в отрицательном направлении
У меня есть довольно большой набор 2D-данных (примерно 1000 строк x 500000 столбцов) в файле HDF5. Набор данных был создан таким образом, что его можно бесконечно расширять, поэтому я могу легко добавлять новые строки внизу и новые столбцы справа....
145 просмотров
schedule
31.12.2023
Хранение подмножеств HDF5 в виде наборов данных (на Python)
У меня ограниченные знания о HDF5, но я хотел бы кое-что понять о выборе HDF.
Чтобы дать некоторый контекст, меня интересует использование HDF5 для приложений в машинном обучении. Предположим, у вас есть матрица данных с n строками и p...
860 просмотров
schedule
29.05.2022
Запись / чтение больших файлов с HDF5 и MPI с использованием 1 процесса из Python
При записи большого набора данных в файл с использованием параллельного HDF5 через h5py и mpi4py (и вполне возможно также при использовании HDF5 и MPI непосредственно из C), я получаю следующую ошибку при использовании драйвера mpio с одним процессом:...
1125 просмотров
schedule
14.09.2023
