Вопросы по теме 'ipython-parallel'
ошибка execute_count при запуске задания в удаленном кластере IPython
Я запускаю кластер IPython (SSH) на удаленной машине Linux и использую Mac OS X с IPython для использования этого кластера. В IPython на Mac я пишу:
from IPython.parallel import Client
c = Client('~/ipcontroller-client.json',...
816 просмотров
schedule
02.03.2023
Стоит ли использовать IPython параллельно с eig scipy?
Я пишу код, который должен вычислять большое количество проблем с собственными значениями (типичный размер матриц - несколько сотен). Мне было интересно, можно ли ускорить процесс с помощью модуля IPython.parallel . Как бывший пользователь MATLAB и...
1625 просмотров
schedule
21.11.2022
Где и как раскрутить повторно используемые ресурсы (matlab.engine) для кластера IPython Задачи
Я решил нацелиться на создание нескольких тестовых сценариев Python, которые будут использовать различные алгоритмы, разработанные несколькими разработчиками в различных средах, чтобы все они были проверены возможностями параллельного распределенного...
170 просмотров
schedule
22.02.2024
Как уменьшить использование параллельной памяти Ipython
Я использую Ipython parallel в алгоритме оптимизации, который зацикливается большое количество раз. Параллелизм вызывается в цикле с использованием метода map LoadBalancedView (дважды), интерфейса словаря DirectView и вызова магии %px . Я...
503 просмотров
schedule
25.11.2023
ipython с кластеризацией MPI с использованием машинного файла
Я успешно настроил mpi с поддержкой mpi4py на трех узлах в соответствии с тестированием сценария hellowworld.py в демонстрационном каталоге mpi4py:
gms@host:~/development/mpi$ mpiexec -f machinefile -n 10 python...
430 просмотров
schedule
07.02.2024
Запустить 2 функции одновременно и параллельно?
у меня есть массив
myArray = array(url1,url2,...,url90)
Я хочу выполнить эту команду 3 раза параллельно
scrapy crawl mySpider -a links=url
и каждый раз с 1 URL,
scrapy crawl mySpider -a links=url1
scrapy crawl mySpider -a...
602 просмотров
schedule
25.07.2022