Я пытаюсь вычеркнуть каждое описание работы - Glassdoor, https://www.glassdoor.ca/Job/new-york-state-data-scientist-jobs-SRCH_IL.0,14_IS428_KO15,29.htm
на странице есть много объявлений о вакансиях, и я пытаюсь просмотреть их и просмотреть каждое описание работы. Моя программа работает нормально, но иногда она пересматривает одно и то же описание работы более одного раза, это случайно. Я думаю, что это происходит из-за высокой скорости просмотра веб-страниц, поэтому некоторые ссылки не нажимаются. Правильно ли это, если я могу решить проблему, замедляя каждый клик по ссылкам.
из временного модуля, time.sleep (1.5) удалил меньше дубликатов, и когда я увеличил time.sleep (3.5), у него было только 2 дубликата. Любые другие предложения?