Я использую Scrapy и настроил:
- Предметы
- ItemLoader
- ItemPipeline
- start_requests с использованием CSV для определения нескольких URL
- Custom Writer
Я просто запускаю скребок:
scrapy crawl scraper
Однако весь вывод идет в один файл.
Я хотел бы получить один выходной файл для каждого запроса / URL?
Чего мне не хватает?