Как добавить в scrapy полосу загрузки видео?

Question

Я сделал паука в scrapy, который загружает видео с этой страницы, на которой есть около 10-20 видео одно за другим, используя конвейеры мультимедиа. Поэтому я хочу сделать индикатор выполнения, чтобы он не выглядел застрявшим, и после завершения видео он отображал соответствующее сообщение. Некоторые предлагают использовать tqdm, но я действительно не знаю, как реализовать это в scrapy.

Answer 1

Существует проблема с репозиторием scrapy github: https://github.com/scrapy/scrapy/issues/3793

В этом случае индикатор выполнения добавлен с использованием tqdm библиотечных методов внутри обработчика http.