Как обойти круговое мета-обращение sh с запросами? - PullRequest
Новая
       90

Как обойти круговое мета-обращение sh с запросами?

0 голосов
/ 19 июня 2020

Я пытаюсь выполнить парсинг с помощью запросов. Мой код до сих пор обычный: 

    import requests   
    html = requests.get('https://www.sampleurl.com').text

Это дает: 

    <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd"><HTML lang=en><HEAD><TITLE>Company Name</TITLE><META HTTP-EQUIV="refresh" CONTENT="1; URL=https://www.sampleurl.com"></HEAD><BODY>

URL-адрес внутри CONTENT такой же, как URL-адрес, который я ввел в запросы, поэтому это не перенаправление, которое Я могу следить, извлекая URL-адрес с помощью BeautifulSoup. Есть ли способ обойти циклические мета-обновления, чтобы я мог перейти на html веб-сайта?

...