Как запретить определенную подпапку в robot.txt?

Question

Вот мой код

Пример шаблона URL

www.example.com/folder/subfolder/*

Хочу разрешить www.example.com/folder/* и особенно запретить

www.example.com/folder/subfolder/*

Как реализовать в robot.txtфайл

Answer 1

Вы можете запретить папку, добавив эту строку в robots.txt

Disallow: /subfolder/