Аутентификация ASP.Net и Googlebot - PullRequest
3 голосов
/ 28 июня 2011

У меня есть веб-сайт ASP.Net 3.5 с включенной аутентификацией форм. Возможно ли, чтобы робот Googlebot сканировал мой веб-сайт без запроса имени пользователя / пароля?

Ответы [ 2 ]

3 голосов
/ 28 июня 2011

Google утверждает, что не имеет обыкновения индексировать страницу и показывать их пользователям как доступные, которых нет, потому что на самом деле они запрашивают имя пользователя и пароль.

Он может дать возможность только сканировать защищенную страницу с помощью AdSense, чтобы он мог знать, какую рекламу показывать на них

https://www.google.com/adsense/support/bin/answer.py?answer=37081

Другие решения, которые проверяют, являются ли они ботами или поступают с компьютеров-ботов Google, небезопасны, поскольку они могут легко подделать пользователи, а также могут не показать предварительный просмотр или кэш страницы.

Так что вам нужно подумать о структуре вашего сайта, что очень важно, а что нет, показать некоторую часть страниц, скрыть другую, если пользователь не зарегистрирован, и таким образом Google есть, что индексировать, даже если его не авторизован.

0 голосов
/ 28 июня 2011

Вот статья:

http://www.guruofsearch.com/google-access-password-protected-site

Было бы интересно посмотреть, приведет ли карта сайта Google к отображению страниц в Google, но я сомневаюсь, что это будет работать,так как страницы, вероятно, все равно придется сканировать.

И некоторые другие интересные комментарии здесь:

http://forums.searchenginewatch.com/showthread.php?t=8221

...