Другая компания создала файл robots.txt для сайта, которым я управляю.Это код, который они использовали:
User-agent: googlebot
User-agent: google
User-agent: bingbot
User-agent: bing
Allow: /products/
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /sales/
Disallow: /products/
Allow: /wp-content/uploads/
Allow: /wp-content/themes/
Allow: /wp-admin/admin-ajax.php*
Я вижу Disallow: / products / and allow / products /.Я не понимаю, почему они так записали это.Должен ли я что-то изменить?