Вопросы по теме 'ray'
назначение num_samples в пакете Tune of Ray для оптимизации гиперпраметра
Я пытаюсь выполнить задачу оптимизации гиперпараметров для LSTM (чистый Tensorflow) с помощью Tune . Я последовал их примеру в алгоритме hyperopt . В этом примере они использовали строку ниже внутри раздела «config».
"num_samples": 10,...
1139 просмотров
schedule
07.05.2022
Параллельный: импорт файла python из родственной папки.
У меня есть дерево каталогов
working_dir\
main.py
my_agent\
my_worker.py
my_utility\
my_utils.py
Код в каждом файле выглядит следующим образом
""" main.py """
import os, sys...
1931 просмотров
schedule
05.04.2022
Как исправить постоянно растущее использование памяти Ray?
Я начал использовать Ray для распределенного машинного обучения, и у меня уже есть некоторые проблемы. Использование памяти просто растет, пока программа не вылетит. Хотя я постоянно очищаю список, память как-то протекает. Есть идеи, почему?
Мои...
3431 просмотров
schedule
07.04.2023
Как указать conv_filters при использовании пользовательской формы obs?
Я использую специальную среду для запуска run_experiment функции Рэя.
Мое наблюдение_пространство
spaces.Box(low=-np.finfo(np.float32).max,
high=np.finfo(np.float32).max,
shape=(3, 76),
dtype=np.float16)...
721 просмотров
schedule
25.08.2023
Как связаны object_store_memory и redis_max_memory?
Я не думаю, что полностью понимаю связь между object_store_memory и redis_max_memory. Сначала я думал, что redis db хранит все объекты в памяти, но тогда как размер хранилища объектов может быть больше, чем размер redis_max_memory? Или некоторые его...
553 просмотров
schedule
24.08.2023
Как сделать входные данные и модель одинаковой формы (обучение с подкреплением RLlib Ray Sagemaker)
У меня несоответствие форм входных данных и модели моего проекта обучения с подкреплением.
Я внимательно слежу за примерами AWS, особенно за примером тележки. Однако я создал свою собственную среду. Я изо всех сил пытаюсь понять, как изменить мою...
1068 просмотров
schedule
29.03.2022
Ray Tensorflow-gpu 2.0 RecursionError
Системная информация
Платформа ОС и распространение (например, Linux Ubuntu 16.04): Ubuntu 18.04.
Ray установлен из (исходный или двоичный): двоичный
Версия Ray: 0.7.3
Версия Python: 3.7
Версия Tensorflow: tensorflow-gpu 2.0.0rc0...
630 просмотров
schedule
01.11.2022
Использование track.log в Ray
В Ray перед вызовом track.log необходимо выполнить track.init . Однако, если я делаю track.log вне функции, которая определяет актера, это дает мне ошибку, жалуюсь на то, что сеанс отслеживания не найден. Но если я сделаю следующее, я создам...
38 просмотров
schedule
01.04.2022
Как я могу полностью синхронизировать `local_dir` (` ~ / ray_results`) с головным узлом?
Я создаю пользовательские файлы результатов в своих заданиях и хочу синхронизировать их с рабочих узлов на головные узлы (чтобы позже синхронизировать их с моим локальным компьютером). Я попытался записать их все в local_dir , например....
133 просмотров
schedule
27.09.2023
Добавление дополнительных показателей в таблицу состояния Ray Tune (Python, PyTorch)
При запуске tune.run() в наборе конфигураций для поиска, можно ли добавить дополнительные столбцы метрик (например, a , b и т. Д.) В распечатываемую таблицу состояния?
tune.track.log(a=metric1, b=metric2)
даст следующую таблицу без...
234 просмотров
schedule
20.07.2023
Почему я получаю PicklingError при распараллеливании задач с помощью Ray в Python?
Я пытаюсь запустить задание прогнозирования машинного обучения параллельно на огромном фрейме данных pandas . Похоже, что ray — хороший пакет для многопроцессорной обработки в Python. Это код:
model_path = './models/lr.pkl'
df =...
95 просмотров
schedule
06.02.2023
Уменьшение частоты выборки действий для одного агента в многоагентной среде
Я впервые использую rllib и пытаюсь обучить настраиваемую многоагентную среду RL, и хотел бы обучить на ней пару агентов PPO. Проблема с реализацией, которую мне нужно выяснить, заключается в том, как изменить обучение одного специального агента так,...
62 просмотров
schedule
11.02.2024
Почему трек Ray Tune не сохраняет все точки данных?
Следующий блок кода предназначен для сохранения нескольких показателей из моего текущего прогона:
track.log(pgd_loss=pgd_loss)
track.log(pgd_acc=pgd_acc)
track.log(test_loss=test_loss)
track.log(test_acc=test_acc)
Однако работает только...
51 просмотров
schedule
06.03.2023
Правильный способ получения журналов удаленных функций в рабочем узле в Ray
Аналогичный вопрос был задан на Как я могу использовать вход в систему с помощью python Рэй? , но предложенное решение мне не подходит.
Я не могу получить журналы с рабочего узла в stdout / logfile. журналы предупреждений и ошибок отображаются в...
247 просмотров
schedule
06.05.2022
Лучшая конфигурация после поиска гиперпараметров с помощью Ray Tune
Я только что запустил свой первый Ray Tune. Я получил хороший вывод на терминал и все это, но теперь мне интересно: какая конфигурация дала мне лучший результат?
Я вижу, что существует множество файлов результатов, но есть ли простой способ...
33 просмотров
schedule
20.08.2022