Неверный код паука. Я создал проект демона, но он не работает, пожалуйста, проверьте мой код против выстрела, и я понятия не имею для всего моего кода паука и проблем.
import scrapy
class EmailSpider(scrapy.Spider):
name='Email'
start_url = [
'http://jsjy.114chn.com/'
]
def parse(self,response):
for Email in response.xpath("//span[@id='lblEmail']"):
yiel{
'email_text': Email.xpath(".//span[@id='lblEmail_text']/p").extract_first()
}
next_page= response.xpath("//li[@class='next']/a/@href").extract_first()
if next_page is not None:
next_page_link= response.urljoin(next_page)
yield scrapy.Request(url=next_page_link, callback=self.parse)
