Вопросы по теме 'grequests'
Использование grequests для отправки нескольких тысяч запросов на получение к sourceforge, превышение максимального количества попыток с URL-адресом
Я очень новичок во всем этом; Мне нужно получить данные о нескольких тысячах проектов sourceforge для статьи, которую я пишу. Все данные находятся в свободном доступе в формате json по адресу http://sourceforge.net/api/project/name/[имя...
12551 просмотров
schedule
07.09.2023
Как обрабатывать ошибки в GRequests?
у меня есть этот код
#!/usr/bin/python
import grequests
urls = [
'http://google.com',
'http://doesnotexists.tld'
]
def do_something(response, **kwargs):
print response.text
async_list = []
for u in urls:
action_item =...
3670 просмотров
schedule
12.06.2023
Как использовать Grequests на AWS Lambda?
У меня есть функция Lambda в Python , которая использует несколько библиотек с бинарными зависимостями: numpy , scipy , Pillow и т. д. В прошлом я успешно скомпилировал их на Amazon Linux и развернул на Lambda .
Однако недавно я добавил...
1175 просмотров
schedule
08.08.2022
grequest не всегда быстро отправляет запрос
Я написал прокси-сервер TCP в python 2.7, который создает гринлет для каждого соединения с помощью gevent. Когда сокет закрывается, я закрываю гринлет. Я использую grequest.map для POST данных, получаемых данным соединением. Я использую...
610 просмотров
schedule
15.05.2024
Извлечение ссылок с веб-сайта с помощью selenium bs4 и python
Хорошо, итак.
Заголовок может показаться, что этот вопрос уже задавался, но мне не удалось найти на него ответ.
Мне нужна помощь в создании программы для извлечения ссылок на Python.
На самом деле это работает. Он находит все <a>...
60 просмотров
schedule
18.07.2022