Нахождение количества страниц сайта

Question

Я хочу найти количество страниц веб-сайта. Обычно я ищу sitemap, но я только что столкнулся с сайтом, у которого нет карты сайта, поэтому у меня нет идей, как найти его общее количество страниц. Я пытался Google URL, но это не сильно помогло. Есть ли другой способ узнать страницы веб-сайта?

Заранее спасибо.

Answer 1

Спросите у Google "site: yourdomain.com" Это даст вам все проиндексированные страницы.

Или используйте бесплатный инструмент "Xenu".Он сканирует весь сайт.Но он не найдет сайты, на которые нет внутренних ссылок.Вы также можете экспортировать карту сайта с ним.

Answer 2

Я сам нашел лучшее решение. Вы можете перейти на Расширенный поиск Google и ограничить результаты поиска до your domain name. Оставьте все остальное пустым. Это даст вам список всех страниц, кэшированных Google.

Answer 3

Я собирался предложить то же самое :) Если это ваш веб-сайт, вы также можете добавить его в инструменты Google для веб-мастеров.Он покажет вам много информации о вашем сайте, включая количество ссылок, страниц, условий поиска и т. Д. Он очень полезен и бесплатен.

Answer 4

Вы также можете попробовать A1 Website Analyzer.Но для всего программного обеспечения для проверки ссылок вы должны будете убедиться, что настроили их правильно, чтобы подчиняться / не подчиняться (независимо от ваших потребностей), например, инструкции robots.txt, noindex и nofollow.(Общий источник путаницы в моем опыте.)