Невозможно собрать данные с веб-сайта с разными вкладками и датами. - PullRequest
1 голос
/ 05 июля 2019

Я не могу очистить данные с сайта ниже. Есть ли в любом случае мы можем очистить данные для различных вкладок на сайте в течение нескольких дней.

https://www.aemo.com.au/Gas/Gas-Bulletin-Board

Пробовал также кое-что проверить на R, но, похоже, он не работает, поскольку диапазоны данных необходимо изменить, поэтому не знаете, как это обойти?

1 Ответ

1 голос
/ 05 июля 2019

Пытались ли вы, например, в Python с Scrapy и Selenium.

попробуйте создать spyder для открытия дополнительных ссылок или импортировать из вкладок, ваш выбор,

и селекторы вфильтруйте данные.

используйте конфигурации для определения периодичности каждого запроса / задания ...

...