Я хочу собрать информацию с нескольких сотен веб-страниц.Циклическая обработка адресов веб-страниц является простой частью, поэтому давайте рассмотрим одну типичную веб-страницу:
https://adams.ohioboe.com/apps/xmlview.aspx?bpty=X&elec=20181106G&prsid=01____1&lang=en
В раскрывающейся форме имеется 18 параметров.После выбора одного из вариантов и нажатия кнопки «Перейти в офис» веб-сайт получает информацию с сервера, выполняет полную перезагрузку, и новая информация отображается под полем.Мне нужна эта информация (текст).Также есть кнопка «Следующий конкурс», которая выполнит аналогичное действие (получение информации с сервера и полная перезагрузка).
У меня вопрос: как использовать Python или JavaScript, чтобы получить HTML изатем зациклите 18 параметров в форме, чтобы я мог затем проанализировать информацию (текст) под раскрывающимся списком для каждого из них?
PS.1. Я знаю, как обрабатывать HTML и анализировать соответствующую информацию, когда она у меня есть.2. Я знаю, что BOE Огайо предоставляет результаты выборов.Мне они не нужны, мне особенно нужен текст в HTML, который будет отображаться для каждой опции в выпадающей форме.3. Я проверил HTML (F12) и не мог понять, как именно HTML меняется каждый раз, когда вы выбираете другую опцию (я не мог видеть, что атрибут 'selected' добавлялся к любой опции)