Блокировать выбор списка данных из Google Bot - PullRequest
2 голосов
/ 07 декабря 2011

Когда Пауки Google сканируют один из моих сайтов, они извлекают данные из списков выбора как данные страницы. Я полностью понимаю, почему это происходит, но вопрос в том, может ли он быть заблокирован каким-либо образом? Я не хочу блокировать сканирование всей страницы, а просто данные списка выбора.

Проблема заключается в следующем: при поиске в Google данные списка выбора отображаются в виде сводки страницы, а не содержимого. Тег описания специально написан, чтобы помочь SEO и предоставить полезную информацию потенциальным посетителям сайта, но его предназначенная функция не реализуется.

Проверьте этот пример https://www.google.com/search?q=alaskan сайт klee kai% 3Awiki-pet.com

Это снижает эффективность поиска на сайте, так как более 1 страницы отображают идентичные данные в результатах поиска. Есть более 200 страниц с точно таким же списком выбора, что позволяет легко перемещаться. Списки выбора не будут удалены.

У меня была идея заполнить содержимое сценарием onload () после того, как на странице появилось

полностью загружен .. есть идеи?

[ EDIT ]

Посмотрите на результаты поиска № 3 и 5, содержащие этот текст: "Все породы - - -, Аффенпинчер, Афганская борзая, Эрдельтерьер, Акбаш Дог, Акита, Алапаха Блу Блад Бог, Аляскинский Клее Кай, Аляскинский ..."

Это содержимое непосредственно из списков выбора на связанных страницах.

1 Ответ

0 голосов
/ 07 декабря 2011

На сервере проверьте, соответствует ли пользовательский агент Googlebot (или другим популярным паукам, таким как bingbot), и не отображайте этот контент.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...