Я хотел бы удалить страницу щебета с помощью скрапа, но я даже не могу удалить слово, как будто у меня нет доступа к ответу html, который мне дал сервер Twitter
import scrapy
from scrapy.shell import inspect_response
class Yell(scrapy.Spider):
name = 'Yelpa'
start_urls = [ 'https://twitter.com/MyAccounnt' ]
def parse(self,response):
FollowNumber = response.xpath('/html/body/div/div/div/div[2]/main/div/div/div/div[1]/div/div[2]/div/div/div[1]/div/div[5]/div[2]/a/span[1]/span/text()').extract()
yield { "Follow_Number" : FollowNumber,
}
inspect_response(response, self)
Вот мой код, и он возвращает [] .
Я думаю, у меня была эта проблема раньше. То, что я сделал, искал другой сайт, который дал мне видимые html файлы в URL. У меня нет альтернативы сейчас, так как я пытаюсь отказаться от твиттера.
Спасибо