Python Scrapy Многостраничный скребок - PullRequest
0 голосов
/ 22 марта 2019

Я пытаюсь добавить +1 к URL и очистить несколько страниц, но я получаю сообщение об ошибке + x part

import scrapy

#formatted here
class HeadphonesSpider(scrapy.Spider):

name = "headphones"

def start_requests(self):

    for x in range(5):
        x = str (x)
        url = 'https://www. domain .com/page=' + x

        yield scrapy.Request(url=url, callback=self.parse)

    def parse(self, response):
        img_urls = response.css('div.job-title a::attr(href)').extract()

        with open('urls.txt', 'w') as f:
            for u in img_urls:
                f.write(u + "\n")
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...