В основном я пытаюсь просмотреть данные перенаправления http при получении ссылки с помощью селена.
С python запросами я бы сделал это так:
r = requests.get(link, allow_redirects=False)
match = re.search(r'some regex', r.headers['Location'])
Но теперь сайт находится под защитой cloudflare, поэтому простые http-запросы больше не работают. Любая идея, как я мог бы посмотреть на заголовки перенаправления с селеном на python?
Другой вариант мог бы заключаться в том, чтобы вставить запрос на селен ie в запрос, но это не выглядит таким надежным.
Подробнее о перенаправлениях:
- I send GET request to URL_A
--> I receive redirect response to URL_B (< This is the one i want)
- URL_B is another redirect response to URL_C (I do not want that)
В основном я в конечном итоге на URL_ C, но я хочу знать URL_B, поэтому мне нужно как-то посмотреть заголовки запросов с помощью selenium