Что вы видите в «Узнайте, почему»? Может быть, это могло бы помочь?
- Откройте файл своего сайта, посетив www.yourdomainname.com/robots.txt
- Исследуйте все сообщения «Запретить». Наиболее распространенной проблемой является «Disallow: /», которая фактически указывает сканерам поисковых систем никогда не сканировать никакие страницы на вашем сайте.
- Используйте инструмент проверки Robots.txt Консоли Google Search Console на проблемных страницах, чтобы подтвердить любой «Disallow» обмен сообщениямивоздействие.
- Используйте инструмент «Получить как Google» на консоли поиска на проблемных страницах, чтобы убедиться, что сканеры Google (настольные и мобильные) могут получать доступ к контенту сайта и отображать его в конце.
- Убедитесь, что ваш сайт работаетне иметь многократную или кэшированную версию robots.txt - проверьте https против http, www. против версий без www или старых версий роботов, на которые Google (и другие движки) все еще могут ссылаться.