Как я могу запретить Google сканировать мою страницу, но все же позволить Baidu сделать это? - PullRequest
0 голосов
/ 25 июня 2019

Я бы хотел запретить только Google сканировать определенную страницу на моем веб-сайте, но я все же хочу, чтобы другие поисковые системы (прежде всего Baidu) сканировали ее.

Понятия не имею, возможно ли это вообще.

1 Ответ

2 голосов
/ 25 июня 2019

Вам необходимо создать файл robots.txt , который блокирует пользовательский агент google

// в файле robots.txt

User-agent: Googlebot
Disallow: /

User-agent: *
Allow: /

Подробнее о роботах.текст здесь: https://support.google.com/webmasters/answer/6062596?hl=en

...