Инструмент для запуска ежечасного сканирования 404 списка страниц - PullRequest
0 голосов
/ 23 марта 2011

Существует ли какой-либо сканер 404, который можно настроить для автоматического запуска, либо в качестве автономного инструмента, либо в качестве задачи Windows?

Я пытаюсь отследить некоторые неуловимые ошибки 404, которые появляются в отчете Google Analytics нашего сайта. Я подозреваю, что наша CMS, MOSS 2007, неправильно обрезает информацию о схеме / хосте из некоторых внешних ссылок при запуске развертывания контента, поэтому ссылки на http://externalsite.com/SomeExternalPage.aspx становятся относительными ссылками на несуществующие страницы: /SomeExternalPage.aspx.

Мне нужно найти инструмент, который позволит мне ежечасно сканировать оскорбительные страницы, чтобы увидеть, когда и как часто это происходит. Я обычно использую Xenu Link Scanner для такого типа вещей, но он не предназначен для командной строки. Любые предложения будут оценены.

1 Ответ

0 голосов
/ 25 марта 2011

Вы можете собрать что-нибудь вместе, используя GNU Wget в пакетном файле или скрипте PowerShell:

http://www.gnu.org/software/wget/

Предварительно собранные двоичные файлы Windows находятся здесь:

http://gnuwin32.sourceforge.net/packages/wget.htm

...