Robots.txt Запретить URL-адреса, которые имеют определенные слова - PullRequest
0 голосов
/ 14 марта 2019

Я хочу запретить URL-адреса, содержащие конкретные (seed_) слова в URL-адресах. такие как

www.example.com/tags/seeds_123-of-plant
www.example.com/tags/plant-have-seeds_124
www.example.com/tags/getting-seeds_78-out-of

В этих URL [ Seeds_ ] указан определенный символ.

Я попробовал все ниже.

disallow: /tags/*seeds_
disallow: /tags/*seeds
disallow: /tags/*seeds?

но ничего не работает, потому что иногда это показывается в середине URL. Пожалуйста, предоставьте достоверные ответы, потому что я много пробовал. И что еще более важно, не дает ответа, такого как

disallow: /tags/*seeds_123
disallow: /tags/*seeds_124?

Поскольку у меня есть почти 100+ URL-адресов, например, поэтому я не могу запретить все из них по одному

Ответы [ 2 ]

0 голосов
/ 21 марта 2019

Понятия не имею, почему они не работают в этот раз.Но теперь они работают нормально ...

disallow: /tags/*seeds_
disallow: /tags/*seeds
0 голосов
/ 14 марта 2019

Звездочка означает что угодно, поэтому это запретит все, что содержит seed_ в каталоге тегов.

disallow: / tags / * seed _ *

...