Я просто переключил серверы;с общего хоста на EC2 и видел лучшую производительность.Я думаю, Google тоже заметил это и увеличил скорость сканирования, к сожалению, для меня он сейчас слишком высок, и я не могу справиться с этим на своих сайтах.Как я могу отказаться?Я немного читал, и люди говорят, что вы можете сделать это в Инструментах Google для веб-мастеров, однако в области, где вы переключаете настройку скорости сканирования, есть сообщение: «Вашему сайту были назначены специальные настройки скорости сканирования. Вы не сможете изменить скорость сканирования.. "
Я полагаюсь на Google по большей части своего трафика, поэтому я не хочу блокировать их через robots.txt. Я просто хочу, чтобы они немного потухли.Есть ли способ сделать это через robots.txt или каким-либо другим способом?