Я использую мультиустановку для моей веб-страницы с двумя разными доменами, и мне нужен для каждого домена уникальный robots.txt
как https://www.domain1.tdl/robots.txt следует использовать https://www.domain1.tdl/robots_domain1.txt
и
https://www.domain2.tdl/robots.txt следует использовать https://www.domain2.tdl/robots_domain2.txt
Проверьте это переписывает в .htaccess
RewriteEngine On RewriteCond %{HTTP_HOST} ^(www\.)?domain1\.tdl [NC] RewriteCond %{REQUEST_URI} ^\/robots\.txt$ RewriteRule (.*) https://www.domain1.tdl/robots_domain1.txt [L] RewriteCond %{HTTP_HOST} ^(www\.)?domain2\.tdl [NC] RewriteCond %{REQUEST_URI} ^\/robots\.txt$ RewriteRule (.*) https://www.domain2.tdl/robots_domain2.txt [L]