Поисковая консоль Google возвращает «No: noindex» обнаружен в метатеге «robots», несмотря на наличие «noindex» в robots.txt - PullRequest
Новая
       35

Поисковая консоль Google возвращает «No: noindex» обнаружен в метатеге «robots», несмотря на наличие «noindex» в robots.txt

1 голос
/ 02 июля 2019

Я пытаюсь проиндексировать сайт в поисковой консоли Google, при проверке URL-адреса появляется сообщение «ИНДЕКС ЗАПРОСОВ»

, когда я делаю это «Нет: noindex» обнаружен в метатеге «роботы»"отображается как ошибка для не индексации.

Ниже приводится мой robots.txt User-agent: * noindex: Карта сайта: http://www.mywebsitehere.com/sitemap_index.xml

I на Wordpress-хостинге.

Я пробовал тестер роботов в предыдущей версии поисковой консоли Google, он говорит "РАЗРЕШЕНО" для ссылок / all.

1 Ответ

1 голос
/ 02 июля 2019

Правило noindex официально не поддерживается Google:

В интересах поддержания здоровой экосистемы и подготовки к потенциальные будущие выпуски с открытым исходным кодом, мы удаляем весь код, который обрабатывает неподдерживаемые и неопубликованные правила (такие как noindex) на 1 сентября 2019 года.

В качестве альтернативы вы можете:

  • Noindex в метатегах роботов: Поддерживается как в заголовках ответа HTTP, так и в HTML, директива noindex является наиболее эффективным способом удаления URL-адресов из индекса, когда сканирование разрешено .
  • 404 и 410 HTTP-коды состояния : Оба кода состояния означают, что страница не существует, что приведет к удалению таких URL-адресов из индекса Google после их сканирования и обработки.
  • Защита паролем: Если разметка не используется для обозначения подписного или платного контента , скрытие страницы за логином обычно удаляет ее из индекса Google.
  • Disallow в robots.txt: Поисковые системы могут индексировать только те страницы, о которых они знают, поэтому блокировка страницы при обходе обычно означает, что ее содержимое не будет проиндексировано. Хотя поисковая система может также индексировать URL на основе ссылок с других страниц, не видя самого контента, мы стремимся сделать такие страницы менее заметными в будущем.
  • Консоль поиска Удалить инструмент URL : Этот инструмент - быстрый и простой способ временного удаления URL из результатов поиска Google.

Источник: Примечание о неподдерживаемых правилах в файле robots.txt | Центральный блог Google для веб-мастеров .

...