Как получить доступ к proxy_url \ auth в urllib3.ProxyManager - PullRequest
0 голосов
/ 01 апреля 2020

Я сейчас работаю над проектом (не моим, чтобы уточнить), который удаляет некоторые сайты, используя urllib3 для выполнения запросов, и некоторые из них находятся под защитой CF. Я нашел некоторую библиотеку cfscrape (et c et c list похожих имен), которая является оберткой запросов. Сеанс, который может помочь обойти меры антибота CF, но есть ловушка, мне нужны прокси, которые выбираются API и положить в объекты ProxyManager. В devenv у меня нет доступа к этим прокси из-за политики. Есть ли простой способ получить URL прокси и аутентификацию из ProxyManager или мне нужно добавить несколько квадратных колес (иначе сохранить их где-нибудь еще в качестве второй копии), чтобы интегрировать эту библиотеку в проект с минимальными затратами труда без значительного снижения производительности? Не очень хочется переписывать использование urllib3 в запросах. Сессия

1 Ответ

0 голосов
/ 14 апреля 2020

Чтобы закрыть вопрос - ProxyManager действительно имеет легкий доступ, хотя странно, что я не смог ничего найти в документации (возможно, я упустил это из виду)

...