Я пытаюсь получить имена пользователей и содержание комментариев, существующих на этой странице :
Пользователь и текст, который мне нужно извлечь:
Когда я тестирую извлечение с помощью подключаемого модуля Chrome Помощник Xpath , я получаю имена пользователей с оператором:
//*[@id="livefyre"]/div/div/div/div/article/div/header/a/span
икомментарии, я получаю их с:
//*[@id="livefyre"]/div/div/div/div/article/div/section/div/p
Когда я делаю тест в консоли Scrapy, с запросом:
response.xpath(//*[@id="livefyre"]/div/div/div/div/article/div/section/div/p).extract()
я получаю [] ;
Я также пытался с:
response.xpath (//*[@id="livefyre"]/div/div/div/div/article/div/section/div/p.text()).extract()
То же самое происходит с моим кодом.
Проверяя код страницы, я вижу, что все этикомментарии не существуют в HTML-коде.
Когда я, например, проверяю страницу, я вижу текст комментария:
Но когда я проверяюHTML-код страницы я ничего не вижу:
Где я делаю ошибку?
Спасибо за помощь.