Я ныряю в утилизацию веб-страниц, и я хотел добавить ротацию IP-адресов в свой python скрипт с помощью библиотеки запросов. Я также хочу запустить этот скрипт в производство благодаря AWS лямбда-функции.
Из того, что я читал, кажется, есть два решения: либо использовать VPN, либо использовать списки прокси с такими решениями, как crawlera, ротаторы прокси или другие. Однако последнее решение для меня слишком дорогое.
Я провел небольшое исследование, и первое решение (VPN) кажется лучшим решением в моем случае, но я не нашел, как реализовать его в скрипте, может кто-нибудь подскажет, пожалуйста?
Большое спасибо :)