Ошибка атрибута на BeautifulSoup с Python (веб-очистка)

Question

Я следую учебному пособию по поиску в Интернете с помощью Python, и у меня пока есть следующее:

import requests
from bs4 import BeautifulSoup

URL = 'https://www.amazon.de/JBL-Charge-Bluetooth-Lautsprecher-Schwarz-      integrierter/dp/B07HGHRYCY/ref=sr_1_2_sspa?__mk_de_DE=%C3%85M%C3%85%C5%BD%C3%95%C3%91&  keywords=jbl+charge+4&qid=1562775856&s=gateway&sr=8-2-spons&psc=1'
headers = {
    "User-Agent": 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.87 Mobile Safari/537.36'}
page = requests.get(URL,headers=headers)
soup = BeautifulSoup(page.text, 'html.parser')
title = soup.find(id="productTitle").get_text()
print(title.strip())

Я пытаюсь напечатать название какого-либо продукта из Amazon, но получаю эту ошибку: AttributeError:Объект NoneType не имеет атрибута get_text, всякий раз, когда я пытаюсь запустить метод get_text () из библиотеки BeautifulSoup. Как я могу успешно напечатать название продукта?

Answer 1

get_text() не работает, потому что ваш селектор не нашел подходящий элемент и вместо него возвратил None. Таким образом, вы вызываете его для пустого элемента, у которого нет метода get_text(). Я не уверен, почему id=productTitle не работает, глядя на HTML, это должно быть imo. Однако вы можете использовать другой селектор и получить вместо него div, чтобы получить похожий результат:

title = soup.find(id="title").get_text()
print(title.strip())

Вывод этого:

"JBL Charge 4 Bluetooth-Lautsprecher in Schwarz, Wasserfeste, portable Boombox mit integrierter Powerbank, Mit nur einer Akku-Ladung bis zu 20 Stunden kabellos Musik streamen"