данные получают запросы с веб-сайта с ошибкой неподдерживаемого браузера - PullRequest
0 голосов
/ 20 ноября 2018

Я в основном попробовал все, но все равно я получаю неподдерживаемую ошибку браузера.Я использую модуль запросов.я пробовал с заголовками, другими модулями, но все так же.

import requests
url = "https://www.ratemyagent.com.au/"
response = requests.get(url)
html_icerigi = response.text
soup = BeautifulSoup(html_icerigi, "html.parser")

https://www.ratemyagent.com.au/ это адрес.пожалуйста, если у вас есть идея избавиться от этой ошибки, дайте мне знать.

большое спасибо заранее

edit: вот что я пробовал в качестве заголовков:

user_agent = 'Mozilla / 5.0 (Windows NT 6.1; WOW64) AppleWebKit / 537.36(KHTML, как Gecko) Chrome / 41.0.2272.101 Safari / 537.36 'headers = {' User-Agent ': user_agent} response = orders.get (url, headers = headers)

версии // python 3.BeautifulSoup4: 4.6.0 запросов: 2.20 [это вывод с использованием soup.text или reponse.text] [1]

1 Ответ

0 голосов
/ 11 января 2019

это not a error

при обычном поиске https://www.ratemyagent.com.au/ по chrome browser на ресурсе страницы, который вы получаете, также есть информация, как вы сказали:

enter image description here


хотя ресурс, который вы получаете по модулю запросов, такой же, как у веб-браузера, я не думаю, что это ошибка.

...