Я использую Анемон. Как мне сканировать субдомен тоже? например, если у меня есть веб-сайт www.abc.com, мой сканер также должен сканировать support.abc.com или blah.abc.com. Я использую Ruby 1.8.7 и Rails 3.
www.abc.com
support.abc.com
blah.abc.com
Вот коммит на Github, который решает вашу проблему.
https://github.com/runa/anemone/commit/91559bde052956cfc40ae62678ec2a61574cf928
Измените ваши гем-файлы анемона по ссылке.
Согласно документам Anemone вы можете передать несколько сайтов в команду crawl:
crawl
Anemone.crawl("http://www.abc.com/", "http://support.abc.com/", "http://blah.abc.com/")
Конечно, вашей следующей проблемой, вероятно, будет ABC, забаняющая вас за сканирование своего сайта, но это другой вопрос.