Webscraping с python, используя вопрос запроса с геолокации - PullRequest
0 голосов
/ 19 сентября 2019

Я в настоящее время очищаю веб-сайт amazon.com с запросом и использованием прокси.

Я использую модуль запроса с python3.

Проблема, с которой я сталкиваюсь, заключается в том, чтоamazon возвращает мне результаты, основанные на геолокации прокси, а не результаты для amazon.com для США.

Как я могу убедиться, что я получу только результаты для amazon.com изСША только для США?

Вот мой код:

import requests
url = 'https://www.amazon.com/s?k=a%20circuit'
proxy_dict = # Proxy details in the dictionary form
response = requests.get(url, proxies=proxy_dict, timeout=(3, 3))
htmlText = response.text
# I am than saving the details in a text file.

Код работает нормально, но он возвращает результаты для местоположения прокси.

Как я могу убедиться, что результаты будут только для США?Shell я, возможно, добавить что-то по URL или что-то в шапке?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...