Запретить индексацию Google в asp.net

Question

Есть ли способ предотвратить индексацию сайта поисковыми системами путем изменения файла ASP.NET Web.config?

Answer 1

Вы можете сделать это, используя robots.txt:

User-agent: *
Disallow: /

Answer 2

Не изменяя Web.config, но вы можете создать robots.txt в корневом каталоге домена. Если вы этого не хотите, вы также можете использовать теги <meta>. Смотри

• http://www.robotstxt.org/robotstxt.html и
• http://www.robotstxt.org/meta.html