как я могу остановить индексирование страниц Google с URL, заканчивающимися датой и временем

Question

У меня есть веб-сайт с несколькими страницами, такими как

• www.xyz.com / product1
• www.xyz.com / product2

иwww.xyz.com/product1/date, который может быть динамическим как то, что ищет пользователь.

Текущий Google индексирует

• www.xyz.com / product1
• www.xyz.com / product2
• www.xyz.com / product1 / дата

Я не хочу, чтобы Google проиндексировал URL-адреса www.xyz.com/product1/date ....

Answer 1

Может быть, написать правильный метатег роботов:

• HTML спецификация

Answer 2

Вы можете делать что хотите с robots.txt в корневом каталоге вашего сайта

User-agent: *
Disallow: /product1/*

Answer 3

Если дата была в части запроса, то есть www.example.com/product1?date=yyyy-mm-dd, вы можете указать Google игнорировать аргумент даты с помощью Инструментов Google для веб-мастеров.

Не могли бы вы сделать компромисс и переместить дату для запроса части URL?