Создание сканера для ввода данных в поисковую систему сайта для извлечения результатов - PullRequest
0 голосов
/ 17 февраля 2020

Мне нужно извлечь данные с веб-сайта, который требует ввода для предоставления этих данных. У меня есть список веб-сайтов, которые я хочу запустить через поисковую систему и извлечь полученные результаты.

Мой первый вопрос: возможно ли это? Если так, как бы я go сделал это?

Веб-сайт, через который я хочу запустить свой список веб-сайтов, - https://neilpatel.com. Чтобы извлечь правильные данные, мне нужно ввести свой список веб-сайтов, выбрать правильный язык (например, dani sh) в раскрывающемся меню и нажать «Поиск». Это отправляет меня на страницу, где я могу увидеть примерный Органический c Ежемесячный трафик c определенного веб-сайта.

Website Organic Monthly Traffic
www.vvs.dk 1,079
www.dekra.dk 7,756
... ...

Моя задача sh - автоматизировать этот процесс, чтобы в сценарии сна я мог загрузить список в Python, запустить код и извлечь предполагаемый органический c traffi c всех сайтов в списке.

Я искал помощи в течение 2 дней. Единственные примеры, которые были близки к тому, чтобы помочь мне, были слишком старыми, а все остальные были недостаточно приблизительными к моей проблеме.

Заранее большое спасибо.

...