403 при копировании запроса из хрома в curl - PullRequest
0 голосов
/ 01 ноября 2018

Пытается наскрести сайт. Он работал нормально около месяца назад, но теперь он дает 403 ответа, даже несмотря на то, что запрос curl был скопирован из Chrome Dev Tools. Запросы все еще работают в браузере и через почтальона. Сайт kohls.com

Ответы [ 2 ]

0 голосов
/ 01 ноября 2018

Вы заблокированы пользовательским агентом. Попробуйте установить его с помощью флага -A и -L, чтобы выполнить перенаправления следующим образом:

curl -v  -L -A "Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:63.0) Gecko/20100101 Firefox/63.0" https://kohls.com
0 голосов
/ 01 ноября 2018

Может быть, попытаться использовать некоторые прокси, похоже, что они действительно отвечают 403 на некоторые пулы IP.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...