Как очистить большой объем (> 800) данных о местоположении в Google My Maps («Подробности из Google Maps») с помощью Web Scraper или других альтернатив? - PullRequest
0 голосов
/ 28 мая 2020

Я пробовал использовать Web Scraper, но он работает только для нескольких записей данных, а не для сотен точек данных. Есть ли способ очистить большой объем данных исключительно с помощью Web Scraper или есть лучшая альтернатива, например python? Я намереваюсь очистить информацию о названии местоположения, адресе, рейтинге и веб-сайте. Спасибо за любой вклад! Screenshot of My Maps Карта сайта:

{"_id":"mymaps","startUrl":["https://www.google.com/maps/d/u/0/edit?....."],"selectors":[{"id":"activityelement","type":"SelectorElementClick","parentSelectors":["_root"],"selector":"div.i4ewOd-TaUzNb-haAclf","multiple":true,"delay":"1000","clickElementSelector":"div.un1lmc-pbTTYe-ibnC6b","clickType":"clickOnce","discardInitialElements":"do-not-discard","clickElementUniquenessType":"uniqueText"},{"id":"activityname","type":"SelectorText","parentSelectors":["activityelement"],"selector":"div.i4ewOd-TaUzNb-r4nke","multiple":false,"regex":"","delay":0},{"id":"activityrating","type":"SelectorText","parentSelectors":["activityelement"],"selector":"span.fO2voc-jRmmHf-LJTIlf-wcwwM-H6j5tf","multiple":false,"regex":"","delay":0},{"id":"activityaddress","type":"SelectorText","parentSelectors":["activityelement"],"selector":".OzwZjf-jRmmHf-MZArnb-KDwhZb div:nth-of-type(3)","multiple":false,"regex":"","delay":0},{"id":"activitywebsite","type":"SelectorLink","parentSelectors":["activityelement"],"selector":"div:nth-of-type(4) a","multiple":false,"delay":0}]}

1 Ответ

0 голосов
/ 30 июня 2020

Вы пробовали Octoparse ?

для сотен точек данных

Это позволяет 10'000 входных URL-адресов ...

...