Вопросы по теме 'urllib2'

Как отладить загрузку файла?
Я пытаюсь загрузить файл PDF на веб-сайт, используя систему управления контентом Hot Banana с использованием скрипта Python. Я успешно вошел на сайт и могу выйти, но не могу заставить работать загрузку файлов. Загрузка файла является частью...
1262 просмотров
schedule 06.06.2022

Использование MultipartPostHandler для отправки данных формы POST с помощью Python
Проблема: при отправке данных с помощью Python urllib2 все данные кодируются в URL-адресе и отправляются как Content-Type: application / x-www-form-urlencoded. При загрузке файлов Content-Type должен быть установлен на multipart / form-data, а...
64759 просмотров

Загрузка веб-страницы и всех ее файлов ресурсов в Python
Я хочу иметь возможность загружать страницу и все связанные с ней ресурсы (изображения, таблицы стилей, файлы сценариев и т. Д.) С помощью Python. Я (в некоторой степени) знаком с urllib2 и знаю, как загружать отдельные URL-адреса, но прежде чем я...
9728 просмотров
schedule 15.07.2023

Почему я получаю, что «ResultSet» не имеет атрибута «findAll», используя BeautifulSoup в Python?
Поэтому я медленно изучаю Python и пытаюсь создать простую функцию, которая будет получать данные со страницы рекордов онлайн-игры. Это чужой код, который я переписал в одну функцию (что может быть проблемой), но я получаю эту ошибку. Вот код:...
15277 просмотров
schedule 10.06.2023

Будет ли этот код Python urllib2 загружать страницу файла?
urllib2.urlopen(theurl).read() ... это загрузит файл. urllib2.urlopen(theurl).geturl() ... это загружает файл? (Сколько времени это занимает)
1260 просмотров
schedule 12.03.2024

urllib2.urlopen() против urllib.urlopen() - urllib2 выдает 404, в то время как urllib работает! ЗАЧЕМ?
import urllib print urllib.urlopen('http://www.reefgeek.com/equipment/Controllers_&_Monitors/Neptune_Systems_AquaController/Apex_Controller_&_Accessories/').read() Приведенный выше скрипт работает и возвращает ожидаемые результаты,...
20964 просмотров

Python и URL-адрес
Я пытаюсь загрузить zip-файл ("tl_2008_01001_edges.zip") с ftp сайт переписи с использованием urllib. В какой форме находится zip-файл, когда я его получаю, и как его сохранить? Я новичок в Python и не понимаю, как работает urllib. Это моя...
11468 просмотров
schedule 11.07.2023

urllib2 несколько заголовков Set-Cookie в ответ
Я использую urllib2 для взаимодействия с веб-сайтом, который отправляет несколько заголовков Set-Cookie. Однако словарь заголовка ответа содержит только один - кажется, что дубликаты ключей переопределяют друг друга. Есть ли способ получить доступ...
3643 просмотров
schedule 30.11.2023

Кеширует ли Google appengine внешние запросы?
У меня есть очень простое приложение, работающее на appengine, которое запрашивает веб-страницу каждые пять минут и анализирует определенный фрагмент данных. Все работает нормально, за исключением того, что ответ, который я получаю от внешнего...
1000 просмотров
schedule 04.06.2024

Форма Python POST с использованием urllib2 (также вопрос о сохранении/использовании файлов cookie)
Я пытаюсь написать функцию для отправки данных формы и сохранения возвращенной информации о файлах cookie в файле, чтобы при следующем посещении страницы информация о файлах cookie отправлялась на сервер (т.е. обычное поведение браузера). Я...
16820 просмотров
schedule 05.11.2023

Как мне поймать конкретную ошибку HTTP в Python?
у меня есть import urllib2 try: urllib2.urlopen("some url") except urllib2.HTTPError: <whatever> но в итоге я ловлю любую ошибку HTTP. Я хочу поймать, только если указанная веб-страница не существует (404?).
121802 просмотров
schedule 04.03.2022

Почему urllib2.urlopen не может открывать страницы типа http://localhost/new-post#comment-29?
Мне любопытно, почему я получаю ошибку 404 при запуске этой строки: urllib2.urlopen("http://localhost/new-post#comment-29") Пока все работает нормально, серфинг по http://localhost/new-post#comment-29 в любом браузере ... Метод urlopen...
1140 просмотров

Как получить URL-адрес, отличный от ascii, с помощью urlopen?
Мне нужно получить данные из URL-адреса с символами, отличными от ascii, но urllib2.urlopen отказывается открывать ресурс и вызывает: UnicodeEncodeError: 'ascii' codec can't encode character u'\u0131' in position 26: ordinal not in range(128)...
31761 просмотров

загрузка файла с помощью urllib2
Я новичок в python и пишу код для загрузки файла с помощью urllib2, но не могу заставить его работать. Вот код: class Get(object): handlers = list() def __init__(self,url): self.url = url self.request =...
3573 просмотров
schedule 24.05.2023

URL-адрес Python2. URLError: ‹ошибка urlopen [Errno 10048] Обычно разрешено только одно использование каждого адреса сокета (протокол/сетевой адрес/порт)›
Я делаю несколько подключений к API. Делаем запрос на удаление. Я получил эту ошибку на 3000-м запросе. Что-то вроде этого: def delete_request(self,path): opener = urllib2.build_opener(urllib2.HTTPHandler) request =...
12692 просмотров
schedule 26.02.2023

Прокси, кажется, игнорируется Mechanize?
Я использую http-прокси и модуль Mechanize. Я инициализирую объект механизации и устанавливаю прокси-сервер следующим образом: self.br = mechanize.Browser() self.br.set_proxies({"http": proxyAddress}) #proxy address is like 1.1.1.1:8080...
2253 просмотров

Ошибка HTTP 400 при попытке отправить данные json с urllib2 в toggl api
При использовании следующего кода для подключения к toggl API я подключаюсь и получаю авторизацию. username = token password = 'api_token' url = 'http://www.toggl.com/api/v3/tasks.json' req = urllib2.Request(url) auth_string =...
3782 просмотров
schedule 18.12.2023

Как получить доступ к исходным заголовкам ответов, которые содержат перенаправление, при использовании urllib2.urlopen
Я пытаюсь проанализировать заголовок местоположения ответа HTTP, который возвращается после использования urllib2.urlopen, но единственные заголовки ответов, которые я получаю, относятся к целевому перенаправлению, а не к исходному ответу, содержащему...
1776 просмотров
schedule 08.07.2023

Python — пример асинхронного/поточного запроса urllib2 с использованием HTTPS
У меня чертовски много времени, чтобы асинхронные/потоковые HTTPS-запросы работали с использованием Python urllib2. Есть ли у кого-нибудь базовый пример, реализующий urllib2.Request, urllib2.build_opener и подкласс urllib2.HTTPSHandler? Спасибо!
23238 просмотров
schedule 23.03.2023

Python: параллельное выполнение нескольких запросов и выполнение первого
Я пытаюсь создать сценарий Python, который выполняет запросы к нескольким сайтам. Скрипт работает хорошо (я использую urllib2), но только для одной ссылки. Для нескольких сайтов я делаю несколько запросов один за другим, но это не очень эффективно....
2056 просмотров
schedule 27.11.2023