Могу ли я сказать сайт-сканерам посетить определенную страницу? - PullRequest
3 голосов
/ 14 июня 2010

У меня есть этот друпал-сайт, который вращается вокруг базы данных документов. По своему дизайну вы можете найти эти документы только путем поиска на сайте. Но я хочу, чтобы все результаты индексировались роботом Googlebot и другими сканерами, поэтому я подумал: а что, если я создам страницу со списком всех документов, а затем скажу роботам посетить страницу, чтобы проиндексировать все мои документы?

Возможно ли это, или есть лучший способ сделать это?

Ответы [ 4 ]

3 голосов
/ 14 июня 2010

Вы должны сделать карту сайта XML.Для этого в Drupal есть модуль под названием XML sitemap (он используется более чем 42 000 сайтов Drupal):

Из модуля:

Модуль XML sitemap создает карту сайта, соответствующую спецификации sitemaps.org.Это помогает поисковым системам более грамотно сканировать веб-сайт и обновлять результаты.Созданная модулем карта сайта может быть автоматически отправлена ​​в Ask, Google, Bing (ранее Windows Live Search) и Yahoo!поисковые системы.Модуль также поставляется с несколькими подмодулями, которые могут добавлять ссылки на карту сайта для контента, элементов меню, терминов таксономии и профилей пользователей.

3 голосов
/ 14 июня 2010

Возможно Карта сайта

Google представил Google Sitemaps, чтобы веб-разработчики могли публиковать списки ссылок со своих сайтов. Основная предпосылка заключается в том, что некоторые сайты имеют большое количество динамических страниц, которые доступны только при использовании форм и пользовательских записей. Затем файлы Sitemap можно использовать, чтобы указать веб-сканеру, как можно найти такие страницы. Google, Bing, Yahoo и Ask теперь совместно поддерживают протокол Sitemaps.

3 голосов
/ 14 июня 2010

Создайте карту сайта XML и отправьте ее в Google . Другие поисковые системы также поддерживают это.

1 голос
/ 14 июня 2010

На самом деле, вас может заинтересовать плагин drupal для создания карты сайта для этого ..

...