Вопросы по теме 'grequests'

Использование grequests для отправки нескольких тысяч запросов на получение к sourceforge, превышение максимального количества попыток с URL-адресом
Я очень новичок во всем этом; Мне нужно получить данные о нескольких тысячах проектов sourceforge для статьи, которую я пишу. Все данные находятся в свободном доступе в формате json по адресу http://sourceforge.net/api/project/name/[имя...
12551 просмотров
schedule 07.09.2023

Как обрабатывать ошибки в GRequests?
у меня есть этот код #!/usr/bin/python import grequests urls = [ 'http://google.com', 'http://doesnotexists.tld' ] def do_something(response, **kwargs): print response.text async_list = [] for u in urls: action_item =...
3670 просмотров
schedule 12.06.2023

Как использовать Grequests на AWS Lambda?
У меня есть функция Lambda в Python , которая использует несколько библиотек с бинарными зависимостями: numpy , scipy , Pillow и т. д. В прошлом я успешно скомпилировал их на Amazon Linux и развернул на Lambda . Однако недавно я добавил...
1175 просмотров

grequest не всегда быстро отправляет запрос
Я написал прокси-сервер TCP в python 2.7, который создает гринлет для каждого соединения с помощью gevent. Когда сокет закрывается, я закрываю гринлет. Я использую grequest.map для POST данных, получаемых данным соединением. Я использую...
610 просмотров

Извлечение ссылок с веб-сайта с помощью selenium bs4 и python
Хорошо, итак. Заголовок может показаться, что этот вопрос уже задавался, но мне не удалось найти на него ответ. Мне нужна помощь в создании программы для извлечения ссылок на Python. На самом деле это работает. Он находит все <a>...
60 просмотров
schedule 18.07.2022