класс удаления веб-поиска в Google = не такой, как в браузере

Question

• 1000 1005 *, но с другими значениями атрибутов я не могу захватить панель видео

text="great+castles"
url = f'https://google.com/search?q={text}'
response = requests.get(url)


print(url)

soup = BeautifulSoup(response.text,'html.parser')

a=soup.findAll('div',{'id':'main'})
a

Я получаю выходной ответ, но атрибуты не такие, как в Google chrome

Answer 1

Во-первых, вы всегда можете записать этот HTML ответ в HTML файл и проверить, что вы на самом деле получаете, открыв его в браузере.

Во-вторых, вы не можете так просто удалить данные из Google, для этого вам нужны прокси, но даже с элитными прокси вы можете столкнуться с рядом проблем, таких как reCaptcha et c.