Вопросы по теме 'ray'

назначение num_samples в пакете Tune of Ray для оптимизации гиперпраметра
Я пытаюсь выполнить задачу оптимизации гиперпараметров для LSTM (чистый Tensorflow) с помощью Tune . Я последовал их примеру в алгоритме hyperopt . В этом примере они использовали строку ниже внутри раздела «config». "num_samples": 10,...
1139 просмотров

Параллельный: импорт файла python из родственной папки.
У меня есть дерево каталогов working_dir\ main.py my_agent\ my_worker.py my_utility\ my_utils.py Код в каждом файле выглядит следующим образом """ main.py """ import os, sys...
1931 просмотров

Как исправить постоянно растущее использование памяти Ray?
Я начал использовать Ray для распределенного машинного обучения, и у меня уже есть некоторые проблемы. Использование памяти просто растет, пока программа не вылетит. Хотя я постоянно очищаю список, память как-то протекает. Есть идеи, почему? Мои...
3431 просмотров
schedule 07.04.2023

Как указать conv_filters при использовании пользовательской формы obs?
Я использую специальную среду для запуска run_experiment функции Рэя. Мое наблюдение_пространство spaces.Box(low=-np.finfo(np.float32).max, high=np.finfo(np.float32).max, shape=(3, 76), dtype=np.float16)...
721 просмотров
schedule 25.08.2023

Как связаны object_store_memory и redis_max_memory?
Я не думаю, что полностью понимаю связь между object_store_memory и redis_max_memory. Сначала я думал, что redis db хранит все объекты в памяти, но тогда как размер хранилища объектов может быть больше, чем размер redis_max_memory? Или некоторые его...
553 просмотров
ray
schedule 24.08.2023

Как сделать входные данные и модель одинаковой формы (обучение с подкреплением RLlib Ray Sagemaker)
У меня несоответствие форм входных данных и модели моего проекта обучения с подкреплением. Я внимательно слежу за примерами AWS, особенно за примером тележки. Однако я создал свою собственную среду. Я изо всех сил пытаюсь понять, как изменить мою...
1068 просмотров

Ray Tensorflow-gpu 2.0 RecursionError
Системная информация Платформа ОС и распространение (например, Linux Ubuntu 16.04): Ubuntu 18.04. Ray установлен из (исходный или двоичный): двоичный Версия Ray: 0.7.3 Версия Python: 3.7 Версия Tensorflow: tensorflow-gpu 2.0.0rc0...
630 просмотров
schedule 01.11.2022

Использование track.log в Ray
В Ray перед вызовом track.log необходимо выполнить track.init . Однако, если я делаю track.log вне функции, которая определяет актера, это дает мне ошибку, жалуюсь на то, что сеанс отслеживания не найден. Но если я сделаю следующее, я создам...
38 просмотров
ray
schedule 01.04.2022

Как я могу полностью синхронизировать `local_dir` (` ~ / ray_results`) с головным узлом?
Я создаю пользовательские файлы результатов в своих заданиях и хочу синхронизировать их с рабочих узлов на головные узлы (чтобы позже синхронизировать их с моим локальным компьютером). Я попытался записать их все в local_dir , например....
133 просмотров
schedule 27.09.2023

Добавление дополнительных показателей в таблицу состояния Ray Tune (Python, PyTorch)
При запуске tune.run() в наборе конфигураций для поиска, можно ли добавить дополнительные столбцы метрик (например, a , b и т. Д.) В распечатываемую таблицу состояния? tune.track.log(a=metric1, b=metric2) даст следующую таблицу без...
234 просмотров
schedule 20.07.2023

Почему я получаю PicklingError при распараллеливании задач с помощью Ray в Python?
Я пытаюсь запустить задание прогнозирования машинного обучения параллельно на огромном фрейме данных pandas . Похоже, что ray — хороший пакет для многопроцессорной обработки в Python. Это код: model_path = './models/lr.pkl' df =...
95 просмотров
schedule 06.02.2023

Уменьшение частоты выборки действий для одного агента в многоагентной среде
Я впервые использую rllib и пытаюсь обучить настраиваемую многоагентную среду RL, и хотел бы обучить на ней пару агентов PPO. Проблема с реализацией, которую мне нужно выяснить, заключается в том, как изменить обучение одного специального агента так,...
62 просмотров

Почему трек Ray Tune не сохраняет все точки данных?
Следующий блок кода предназначен для сохранения нескольких показателей из моего текущего прогона: track.log(pgd_loss=pgd_loss) track.log(pgd_acc=pgd_acc) track.log(test_loss=test_loss) track.log(test_acc=test_acc) Однако работает только...
51 просмотров
schedule 06.03.2023

Правильный способ получения журналов удаленных функций в рабочем узле в Ray
Аналогичный вопрос был задан на Как я могу использовать вход в систему с помощью python Рэй? , но предложенное решение мне не подходит. Я не могу получить журналы с рабочего узла в stdout / logfile. журналы предупреждений и ошибок отображаются в...
247 просмотров
schedule 06.05.2022

Лучшая конфигурация после поиска гиперпараметров с помощью Ray Tune
Я только что запустил свой первый Ray Tune. Я получил хороший вывод на терминал и все это, но теперь мне интересно: какая конфигурация дала мне лучший результат? Я вижу, что существует множество файлов результатов, но есть ли простой способ...
33 просмотров
schedule 20.08.2022