Spla sh не загружается javascript должным образом для сканирования веб-сайта (scrapy-spla sh) - PullRequest
Новая
       34

Spla sh не загружается javascript должным образом для сканирования веб-сайта (scrapy-spla sh)

0 голосов
/ 26 мая 2020

Мне сложно отладить, почему Spla sh не может правильно загрузить javascript для этого веб-сайта: https://www.bigc.co.th/2000003703081.html

Я упомянул это ответ на отключение запуска Spla sh в частном режиме, а также другие решения здесь, в документации , такие как увеличение времени ожидания и настройка пользовательского агента.

Однако веб-сайт все еще загружается, как будто без JS на Spla sh, как показано на этом рисунке ниже enter image description here

В настоящее время я отлаживаю почему веб-сайт не загружается должным образом с целью включения этого с кодом scrapy-spla sh.

Вот мой текущий сценарий. Заранее благодарим вас за ваше время и помощь! 

function main(splash, args)
  splash:set_user_agent('Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.61 Safari/537.36')
  splash.private_mode_enabled = false
  splash:set_viewport_full()
  splash:go{url=args.url}
  assert(splash:wait(1))
  return {
    html = splash:html(),
    png = splash:png(),
    har = splash:har(),
  }
end
...