Как я могу обработать Javascript в веб-сканере Perl?

Question

Я хотел бы сканировать веб-сайт, проблема в том, что он полон JavaScript-вещей, таких как кнопки и такие, что при нажатии они не меняют URL, но данные на странице изменяются.

Обычно для сканирования сайтов я использую LWP / Mechanize и т. Д., Но ни один из них не поддерживает JavaScript. есть идеи?

Answer 1

Другой вариант может быть Селен с WWW :: Селен модуль

Answer 2

Модуль WWW :: Scripter имеет плагин JavaScript , который может быть полезен.Однако я не могу сказать, что использовал это сам.

Answer 3

WWW :: Mechanize :: Firefox может быть полезным. таким образом вы можете заставить Firefox обрабатывать сложные проблемы JavaScript, а затем извлекать результирующий html.

Answer 4

iMacros для IE / Firefox / Chrome - очень гибкий веб-скребок, которым можно управлять из Perl: http://wiki.imacros.net/Perl

Answer 5

Я бы предложил HtmlUnit и оболочку Perl: WWW :: HtmlUnit .