Я прочитал пересмотр документов Scrapy Задержка загрузки , в котором говорится, что.
Время (в секундах), в течение которого загрузчик должен ждать перед загрузкой последовательных страниц стот же веб-сайт.
Однако он не определяет поведение паука при следующих перенаправлениях.Мой вопрос заключается в том, ожидает ли паук scrapy количество секунд X, заданное в параметре DOWNLOAD_DELAY, при следующих переадресациях 301 или 302.
Если это произойдет, то можно ли это переопределить, указав не подчиняться задержке загрузки при следующих перенаправлениях?
Спасибо