Я очищаю список веб-сайтов на предмет изображений, используя selenium webdriver + scrapy, но следующая кнопка для каждого веб-сайта имеет разные имена классов / div, как автоматически находить следующие страницы на разных сайтах для очистки?
Вот самая базовая c структура для разбивки на страницы:
page_count = 1 while (nextbutton.isEnbled): # Increase page_count value on each iteration on +1 page_count += 1 try: nextbutton.click() except NoSuchElementException: # Stop loop if no more page available break