Я сканирую веб-сайт с большими страницами размером 100 МБ.
Настройка драйвера:
chrome_options = Options()
chrome_options.add_argument("--headless")
chrome_options.add_argument("window-size=1920,1080")
chrome_options.add_argument('--no-sandbox')
chrome_options.add_argument('--ignore-certificate-errors')
driver = webdriver.Chrome(executable_path="chromedriver", chrome_options=chrome_options)
Следующий код
html = driver.page_source
приводит к ошибке:
selenium WebDriverException: Message: unknown error: bad inspector message
(Session info: headless chrome=66.0.3359.181)
(Driver info: chromedriver=2.38.552518 (183d19265345f54ce39cbb94cf81ba5f15905011),platform=Mac OS X 10.11.6 x86_64)
Нет вероятности, что на моем ноутбуке не хватает памяти