Краткая версия: как мне узнать, как сформулировать дополнительные данные (например, определенные параметры на странице, которые отображают разные HTML-файлы, но относятся к одному и тому же URL-адресу) при получении URL-адреса с помощью urllib?
Длинная версия: мне трудно понять, как обрабатывать свойства запроса URL, которые определяются не URL-адресом ссылки, а, возможно, другой информацией, которую обычно отправляет ваш браузер. Точнее: эта страница содержит таблицу, которую я хочу прочитать с помощью python, но длина таблицы зависит от количества элементов на странице, которое вы выбираете в левом нижнем углу (т.е. количество элементов в коде, который я получаю из urllib.request.urlopen, является стандартом 50 или около того, а не полная таблица). Нажатие кнопок, например. 400 элементов на странице не меняют URL-адрес, поэтому я ожидаю, что какая-то информация отправлена куда-то еще. Я понимаю, что использование urllib может отправлять дополнительные данные помимо URL-адреса, но мне неясно, как мне понять, как я должен формулировать «дайте мне всю таблицу» (или «дайте мне 400 элементов на страницу») в этих данных.
Изучение файла .html, который я получаю при сохранении веб-страницы в своем браузере, не дало мне никаких подсказок, и мне не хватает словарного запаса для поиска ответов в Интернете (то есть поиск в Google «параметра запроса urllib» слишком расплывчатый). Поэтому я был бы полностью удовлетворен, если бы кто-нибудь указал мне на дубликат этого вопроса.
Заранее спасибо :)