Зачем использовать Google Sitemap?

Question

Я играл с Google Sitemaps на нескольких сайтах. Параметры lastmod, changefreq и priority довольно крутые в теории. Но на практике я не видел, чтобы эти параметры сильно влияли.

И большинство моих сайтов не имеют Google Sitemap, и это сработало нормально. Google все еще сканирует сайт и находит все мои страницы. Старые механизмы meta robot и robots.txt по-прежнему работают, когда вы не хотите, чтобы страница (или каталог) была проиндексирована. И я просто оставляю все остальные страницы в покое, и пока есть ссылка на них, Google найдет их.

Итак, какие причины вы нашли для написания Google Sitemap? Стоит ли это того?

Answer 1

Из FAQ :

Файлы Sitemap особенно полезны, если:

• Ваш сайт имеет динамическое содержание.
• На вашем сайте есть страницы, которые нелегко обнаружен роботом Google во время процесс сканирования - например, страницы показывая богатый AJAX или изображения.
• Ваш сайт новый и на него мало ссылок. (Робот Googlebot сканирует сеть следующие ссылки с одной страницы на другой, так что если ваш сайт не очень хорошо связаны, это может быть трудно для нас узнай это.)
• Ваш сайт имеет большой архив содержимого страниц, которые не являются хорошо связаны друг с другом, или нет связаны вообще.

Это также позволяет вам предоставлять более детальную информацию в Google об относительной важности страниц на вашем сайте и о том, как часто паук должен возвращаться. И, как уже упоминалось выше, если Google считает ваш сайт достаточно важным, чтобы показывать подссылки в результатах поиска, вы можете контролировать то, что отображается через карту сайта.

Answer 2

Я полагаю, что "специальные ссылки" в результатах поиска генерируются из карты сайта Google. Что я имею в виду под "специальной ссылкой"? Поиск «apache», под первым результатом (фундамент программного обеспечения Apache) есть два столбца ссылок («Apache Server», «Tomcat», «FAQ»).

Answer 3

Полагаю, это поможет Google расставить приоритеты для сканирования? Но на практике я был вовлечен в проект, в котором мы использовали большую версию gzip-ed, где это помогло. И у AFAIK есть хорошая интеграция с инструментами для веб-мастеров.

Answer 4

Мне также интересно узнать эту тему, но стоит ли что-нибудь генерировать карту сайта?

Теоретически, все, что ничего не стоит и может иметь потенциальную выгоду, даже если оно очень мало или очень отдаленно, может быть определено как "стоящее того".

Кроме того, Google говорит: «Расскажите нам о своих страницах с помощью файлов Sitemap: какие из них наиболее важны для вас и как часто они меняются. Вы также можете сообщить нам, как вы хотите, чтобы URL-адреса, по которым мы индексируем появляются."( Инструменты для веб-мастеров )

Я не думаю, что смелое утверждение выше возможно с традиционными механизмами, которые поисковые системы используют для обнаружения URL.