Вопросы по теме 'netcdf'
работа с большими научными данными на Hadoop
В настоящее время я начинаю проект под названием «Облачные вычисления для алгоритмов интеллектуального анализа временных рядов с использованием Hadoop». Данные, которые у меня есть, представляют собой файлы hdf размером более терабайта. В Hadoop, как...
4489 просмотров
schedule
11.08.2023
Обработка очень больших файлов netCDF в python
Я пытаюсь работать с данными из очень больших файлов netCDF (~ 400 ГБ каждый). Каждый файл имеет несколько переменных, все они намного больше, чем системная память (например, 180 ГБ против 32 ГБ ОЗУ). Я пытаюсь использовать numpy и netCDF4-python...
9317 просмотров
schedule
14.05.2024
ошибка при установке octcdf-1.1.5
У меня есть в моем Mac:
Октава-3.4.0
Gnuplot 4.2 - который мне пришлось установить, потому что у меня были проблемы с графикой - он вообще не рисовал.
Мне нужно загрузить файл netcdf, возникла ошибка:
nc =...
450 просмотров
schedule
05.09.2023
Как записать несколько бэндов из netcdf в бинарный файл?
У меня есть файл netcdf, я открыл его и прочитал одну переменную:
K=open.ncdf("C:\\hiba_history.nc")
Smonthly= get.var.ncdf(nc=K,varid="evap",verbose=TRUE)
[1] "vobjtodimname: is a character type varid. This file has 9 dims"
[1] "vobjtodimname:...
444 просмотров
schedule
21.05.2022
Преобразование NetCDF в GRIB2
Я знаю, что существует программное обеспечение, такое как wgrib2 , которое преобразует файлы в grib и grib2 в NetCDF файлы, но мне нужно пойти другим путем: из NetCDF в grib2 , потому что местные метеослужбы здесь могут использовать данные...
16132 просмотров
schedule
21.01.2024
Установка «ncdf» на R, когда у меня нет прав суперпользователя
У меня есть доступ к суперкомпьютеру, для которого у меня нет прав суперпользователя. На машине доступны версии 3 и 4 netcdf, но я не знаю, есть ли на ней библиотеки разработки, необходимые R для установки ncdf . Обычно я использую его для запуска...
1214 просмотров
schedule
01.08.2022
Как установить netcdf-openmpi-devel в Red Hat 6
Мне нужно установить netcdf-openmpi-devel на Red Hat 6. Проблема в том, что этого нет в имеющихся у меня репозиториях: redhat и epel. Я уже пытался загрузить несколько rpm-пакетов Fedora, но почти для всех из них невозможно проверить их ключи (сделав...
507 просмотров
schedule
12.02.2022
netcdf4-python: объем памяти увеличивается за счет многочисленных вызовов среза данных из объекта netcdf
Я пытаюсь прочитать фрагменты данных из файла netcdf4 с помощью netcdf4-python. Это первый раз, когда я использую python, и у меня возникают проблемы с памятью. Ниже представлена упрощенная версия кода. На каждой итерации цикла память...
817 просмотров
schedule
29.12.2021
Как использовать параллельный ввод/вывод с netCDF-4?
Я хотел бы читать и писать из одного файла netCDF-4 из R. К файлу будут обращаться многие процессы узлов одновременно (~ 100 для разработки, ~ 1000 для производства).
Как лучше всего получить доступ к функциям параллельного ввода-вывода в netCDF из...
1481 просмотров
schedule
17.04.2024
Чтение и запись файла Netcdf с помощью R
Как я могу прочитать и записать следующий файл с помощью R?
https://www.dropbox.com/s/vlnrlxjs7f977zz/3B42_daily.2012.11.23.7.nc
Другими словами, я хотел бы прочитать файл «3B42_daily.2012.11.23.7.nc» и записать с той же структурой, что и...
1063 просмотров
schedule
19.07.2022
Есть ли простой способ чтения целочисленных данных времени из файла netcdf с использованием атрибута времени?
Я пытаюсь прочитать данные о временных координатах из файла netCDF, используя Matlab. У меня есть файл netCDF (который я создал), в котором есть переменная времени в формате двойника, соответствующая количеству часов от определенного времени (см....
1375 просмотров
schedule
30.07.2022
Как прочитать файл gzip netcdf в python?
У меня есть работающая программа на Python, которая считывает несколько больших файлов netCDF с помощью команды Dataset из модуля netCDF4. Вот фрагмент соответствующих частей:
from netCDF4 import Dataset
import glob
infile_root =...
4083 просмотров
schedule
05.03.2022
Извлечь данные прогноза погоды из NetCDF 4.5 Grib2Record
Обновление : изменен этот вопрос, чтобы лучше отразить мое текущее понимание.
У меня есть объект Grib2Record NetCDF версии 4.5. Учитывая точку сетки (x, y) и имя переменной, я хочу извлечь все данные прогноза для этой переменной по времени...
658 просмотров
schedule
27.03.2022
Использование извлечения данных R netcdf4
Я столкнулся с проблемой извлечения данных для региона latitude 25 to 32, longitude 81 to 98 из файла netcdf4 sund_WAS-44_ICHEC-EC-EARTH_rcp26_r12i1p1_SMHI-RCA4_v2_day_20510101-20551231.nc .
Значение широты и долготы находятся в матрице 193*130....
997 просмотров
schedule
20.10.2023
Пользовательское имя файла при чтении в файлах netCDF в Python
У меня есть набор файлов данных о влажности почвы с 1953 по 2014 год. Все они имеют форму cpc_soil_YYYY.nc (где YYYY — один из этих лет). Есть ли способ запросить у пользователя ввод данных о том, какой год пользователь хотел бы просмотреть, и...
185 просмотров
schedule
13.06.2023
Matlab: экспортировать переменную с отметкой времени netcdf
Я сохраняю массив 1x50 в переменной в файле netCDF, и эта операция выполняется каждые ~ 10 секунд. Я также хотел бы сохранить matlab'time datestr (сейчас) (ГГГГ-ММ-ДДЧЧ: ММ: СС).
Как мне поступить? Я безуспешно пытался сохранить дату...
76 просмотров
schedule
10.04.2023
интерпретация переменных измерения netcdf
Пытаюсь понять, разрешено ли это стандартами NetCDF. Для меня это не имеет значения, но, возможно, есть причина, по которой это не запрещено на уровне библиотеки. Ncdump:
netcdf tt {
dimensions:
one = 2 ;
two = 1 ;
variables:
int64...
131 просмотров
schedule
15.12.2023
Xray не может загрузить данные ascii в файл netcdf
Я использую библиотеку xray python для добавления всех данных из файла ascii в файл netcdf. Файл ascii содержит данные для каждой ячейки с шагом 0,25 градуса на Земле.
Я могу создать все размеры широты и долготы, но не могу добавить данные. Файл...
138 просмотров
schedule
07.01.2024
переустановить данные netcdf для более точного разрешения в python
Я хотел бы уменьшить разрешение данных netcdf с 0,5 градуса до 0,25 (или ниже), просто создав новые ячейки сетки с более мелким разрешением, которые имеют то же значение, что и ячейка с более грубым разрешением. У меня есть фол. код, который отлично...
2025 просмотров
schedule
12.05.2024
высокое разрешение Данные повторного анализа
Когда я извлекаю данные из файла netCDF Reanalysis (переменное давление (SLP), 01.01.2014), данные имеют очень высокое разрешение (сетка 9 км), что делает результирующее изображение довольно шумным. Я хотел бы поместить данные в сетку с более низким...
489 просмотров
schedule
13.01.2024
