Вопросы по теме 'urllib'

Как скачать файл по http с авторизацией в python 3.0, обходя баги?
У меня есть скрипт, который я хотел бы продолжить использовать, но похоже, что мне нужно либо найти какой-то обходной путь для ошибки в Python 3, либо вернуться к версии 2.6, и, следовательно, мне придется понизить и другие скрипты... Надеюсь,...
19244 просмотров
schedule 25.04.2023

Python: загрузка большого файла по локальному пути и установка пользовательских заголовков http
Я хочу загрузить файл с URL-адреса http в локальный файл. Файл достаточно большой, поэтому я хочу загрузить его и сохранить кусками, а не read() и write() весь файл в виде одной гигантской строки. Интерфейс urllib.urlretrieve , по сути, то,...
6645 просмотров
schedule 15.10.2022

Интерфейс Python для PayPal - сбой символов urllib.urlencode, отличных от ASCII
Я пытаюсь реализовать функциональность PayPal IPN. Основной протокол таков: Клиент перенаправляется с моего сайта на сайт PayPal для завершения платежа. Он входит в свою учетную запись, авторизует оплату. PayPal вызывает страницу на моем...
13933 просмотров
schedule 09.03.2022

Python: получить заголовки HTTP из вызова urllib2.urlopen?
Выбирает ли urllib2 всю страницу при urlopen вызове? Я хотел бы просто прочитать заголовок ответа HTTP, не открывая страницу. Похоже, urllib2 открывает HTTP-соединение, а затем получает фактическую HTML-страницу ... или просто начинает...
109247 просмотров
schedule 06.07.2023

Django: добавить изображение в ImageField из URL-адреса изображения
пожалуйста, извините меня за мой уродливый английский ;-) Представьте себе эту очень простую модель: class Photo(models.Model): image = models.ImageField('Label', upload_to='path/') Я хотел бы создать фотографию из URL-адреса...
61571 просмотров
schedule 17.03.2022

я должен вызывать close () после urllib.urlopen ()?
Я новичок в Python и читаю чужой код: должен ли за urllib.urlopen() следовать urllib.close() ? В противном случае могут возникнуть утечки в соединениях, верно?
50849 просмотров
schedule 12.05.2023

Как автоматически войти в фид атома Gmail с помощью Python?
В Gmail есть замечательная штука для получения фида атомов: def gmail_url(user, pwd): return "https://"+str(user)+":"+str(pwd)+"@gmail.google.com/gmail/feed/atom" Теперь, когда вы делаете это в браузере, он аутентифицирует и...
5961 просмотров
schedule 29.09.2022

Получить источник динамического веб-сайта с помощью python (в обход onclick)
Я хочу получить источник веб-сайта, который динамически генерируется при нажатии на ссылку. Сама ссылка выглядит следующим образом: <a onclick="function(); return false" href="#">Link</a> Это останавливает меня от прямого запроса...
1082 просмотров
schedule 29.01.2024

Многокомпонентный/поточный загрузчик через python?
Я видел в Интернете несколько многопоточных загрузчиков и даже несколько загрузчики, состоящие из нескольких частей (HTTP). Я не видел их вместе как класс/функцию. Если у кого-то из вас есть класс/функция, которую я могу просто добавить в...
2026 просмотров

Разбор ответа Python с использованием httplib
После подключения к сокету и захвата ответа с помощью .read() как мне анализировать входной поток и строки чтения? Я вижу, что данные возвращаются без CRLF <html><head><title>Apache Tomcat/6.0.16 - Error...
3397 просмотров
schedule 04.08.2022

Python: urllib2.urlopen(url, data) Почему вам нужно urllib.urlencode() данные?
Я думал, что сообщение отправило всю информацию в заголовках HTTP, когда вы использовали сообщение (очевидно, я плохо информирован по этому вопросу), поэтому я смущен, почему вы должны urlencode() данные в формате key=value&key2=value2 . Как это...
9401 просмотров
schedule 17.04.2023

URL-адрес и пользовательский агент? - Питон
Я использую urlretrieve из модуля urllib. Кажется, я не могу найти, как добавить описание User-Agent к моим запросам. Возможно ли это с помощью urlretrieve? или мне нужно использовать другой метод?
11466 просмотров
schedule 16.04.2022

Ошибка ввода-вывода (ошибка сокета): [Errno 111] В соединении отказано
У меня есть программа, которая использует urllib для периодического извлечения URL-адреса, и я вижу прерывистые ошибки, например: Ошибка ввода-вывода (ошибка сокета): [Errno 111] В соединении отказано. В 90% случаев работает, а в остальных 10%...
150956 просмотров
schedule 09.01.2023

Перебор каталога в Интернете и отображение его содержимого (файлов и других каталогов) через Python
В том же духе, что и Обработка набора файлов из исходного каталога в целевой каталог в Python Мне интересно, можно ли создать функцию, которая при указании веб-каталога будет перечислять файлы в указанном каталоге. Что-то типа... files[] for...
599 просмотров
schedule 14.12.2022

Python 2.6 -> Python 3 (ProxyHandler)
Я написал скрипт, работающий с прокси (py2.6x): proxy_support = urllib2.ProxyHandler({'http' : 'http://127.0.0.1:80'}) Но в py3.11x нет urllib2, просто urllib... и он не поддерживает ProxyHandler Как я могу использовать прокси с urllib?...
9681 просмотров
schedule 27.07.2023

Я получаю сообщение об ошибке при попытке открыть URL-адрес веб-сайта с помощью Python 3.1, urllib и json: операция была предпринята для чего-то, что не является сокетом
Я получаю сообщение об ошибке при попытке открыть URL-адрес веб-сайта с помощью Python 3.1, urllib и json urllib.error.URLError: Вот код. Первый сайт загружается нормально. Второй import json import urllib.request import urllib.parse...
1421 просмотров
schedule 07.12.2022

Скачивание картинки через urllib и python
Итак, я пытаюсь создать сценарий Python, который загружает веб-комиксы и помещает их в папку на моем рабочем столе. Я нашел здесь несколько похожих программ, которые делают что-то похожее, но не совсем то, что мне нужно. Тот, который я нашел...
371540 просмотров
schedule 04.11.2022

Выполнение HTTP POST-запроса
Я пытаюсь сделать запрос POST для получения информации о книге. Вот код, который возвращает HTTP-код: 302, Moved import httplib, urllib params = urllib.urlencode({ 'isbn' : '9780131185838', 'catalogId' : '10001', 'schoolStoreId' :...
65507 просмотров
schedule 13.07.2022

AttributeError: объект 'module' не имеет атрибута 'urlopen'
Я пытаюсь использовать Python для загрузки исходного HTML-кода веб-сайта, но получаю эту ошибку. Traceback (most recent call last): File "C:\Users\Sergio.Tapia\Documents\NetBeansProjects\DICParser\src\WebDownload.py", line 3, in...
337987 просмотров
schedule 24.12.2023

Загрузка файлов с помощью Python Urllib, Urllib2
Я пытаюсь загрузить файлы с веб-сайта, используя urllib, как описано в этой теме: текст ссылки import urllib urllib.urlretrieve ("http://www.example.com/songs/mp3.mp3", "mp3.mp3") Я могу скачать файлы (в основном в формате pdf), но все, что...
9400 просмотров
schedule 23.05.2022