Какой .htaccess rewriterule я должен использовать для обнаружения известных ботов, например больших:
altavista, google, bing, yahoo
Я знаю, что могу проверить их ips или хосты, но есть ли лучший способ?
RewriteCond %{HTTP_USER_AGENT} AltaVista [OR] RewriteCond %{HTTP_USER_AGENT} Googlebot [OR] RewriteCond %{HTTP_USER_AGENT} msnbot [OR] RewriteCond %{HTTP_USER_AGENT} Slurp RewriteRule ^.*$ IHateBots.html [L]