Я всегда получаю статус 429 с помощью scrapy, но затем получаю статус 200 при использовании браузера для того же URL. Это превентивная мера со стороны домена, чтобы запретить очистку своего сайта или это мой параметр?
Как я знаю, статус 429 - это слишком много запросов. Я попытался установить параллельный запрос на 1, и он все еще не работает.
Надеюсь, что кто-то может дать мне отзыв об этом.
Спасибо всем