Ошибка типа: ожидаемый объект str, bytes или os.PathLike, не установлен - ошибка Scrapy - PullRequest
Новая
       28

Ошибка типа: ожидаемый объект str, bytes или os.PathLike, не установлен - ошибка Scrapy

0 голосов
/ 06 февраля 2019

Я новичок в использовании Scrapy.Я пытаюсь загрузить изображение и установить конвейеры, но что-то является ошибкой, и я не могу понять об этом.

books.py 

class Books2Spider(Spider):
    name = 'books2'
    allowed_domains = ['books.toscrape.com']
    start_urls = ['http://books.toscrape.com']

    def parse(self, response):
        books = response.xpath('//h3/a/@href').extract()
        ...
        pass


    def parse_book(self, response):
        l = ItemLoader(item=BooksCrawlerItem(), response=response)

        title = response.css('h1::text').extract_first()
        price = response.xpath('//*[@class="price_color"]/text()').extract_first()

        image_urls = response.xpath('//img/@src').extract_first()
        image_urls = image_urls.replace('../..', 'http://books.toscrape.com/')

        l.add_value('title', title)
        l.add_value('price', price)
        l.add_value('image_urls', image_urls)

        return l.load_item()

settings.py 

ITEM_PIPELINES = {
    'scrapy.pipelines.images.ImagesPipeline': 1
}

IMAGES_STORE = {
    '/home/jaki/Dev/WebScrapingScratch/images'
}

Я сканирую эту команду, scrapy crawl books2.Если все в порядке, тогда изображения будут загружены.Но я сталкиваюсь с ошибкой.Ошибка:

... если os.path.isabs (uri): # для поддержки путей win32, например: C: \ some \ dir File "/usr/lib/python3.6/posixpath.py ", строка 66, в isabs s = os.fspath (s) TypeError: ожидаемый объект str, bytes или os.PathLike, не установлен

1 Ответ

0 голосов
/ 06 февраля 2019

Настройки IMAGE_STORE должны быть одним путем.

Заменить: 

IMAGES_STORE = {
    '/home/jaki/Dev/WebScrapingScratch/images'
}

на: 

IMAGES_STORE = '/home/jaki/Dev/WebScrapingScratch/images'

{'asdf'} является set со строкой asdf, отсюда и сообщение об ошибке.

...