Я пытаюсь очистить этот сайт . Когда я пытаюсь разбить страницы на страницы
https://timesofindia.indiatimes.com/topic/Hiv/news/1 https://timesofindia.indiatimes.com/topic/Hiv/news/2 и т. Д.
Я обнаружил, что перенаправлен обратно на начальный URL
https://timesofindia.indiatimes.com/topic/Hiv/news/
Поскольку я использую Web Scraper расширение Chrome, я не могу проверить ответ, отправив файлы cookie для сеанса. Я предполагаю, что это может быть либо та, либо некоторая локально сохраненная переменная, которая проходит через страницы. Если есть обходной путь для того же, используя расширение, пожалуйста, дайте мне знать.