Возможно, вы захотите подтвердить свой сайт с помощью Инструментов Google для веб-мастеров, которые предоставят URL-адреса, по которым будет обнаружена эта ошибка.
Ваши журналы также действительны, но вам нужно убедиться, что это действительно робот Google, попавший на ваш сайт, а не кто-то подделывает их пользовательский агент.
Вот инструкции, чтобы сделать это: http://googlewebmastercentral.blogspot.com/2006/09/how-to-verify-googlebot.html
По сути, вам нужно выполнить обратный поиск DNS, а затем прямой поиск DNS после получения хоста из обратного поиска.
Как только вы убедились, что это настоящий робот Google, вы можете приступить к устранению неполадок.,Вы видите, что робот Google не будет запрашивать URL-адреса, которые он раньше не видел, а это значит, что робот Google не должен запрашивать прямые ссылки на объекты.Я подозреваю, что это мошеннический бот с пользовательским агентом Googlebot, но если это не так, вы можете просмотреть свой сайт, чтобы убедиться, что вы случайно не ссылаетесь на эти страницы.
К сожалению, вы опубликовали полные URL-адреса, поэтому даже если вы очистите свой сайт, Googelbot увидит ссылки из переполнения стека и продолжит сканировать их, потому что он будет в их очереди сканирования.
Я бы предложил 301 перенаправить эти URL-адреса туда, где есть смысл для ваших пользователей.В противном случае я бы 404 или 410 этих страниц, чтобы Google знал, чтобы удалить эти страницы из их индекса.
Кроме того, если эти страницы вы не хотите индексировать, я бы предложил добавить путь к вашему robots.txtфайл, поэтому робот Googlebot не может продолжать запрашивать больше этих страниц.
К сожалению, по-настоящему хорошего способа сказать роботу Google никогда больше не сканировать эти URL-адреса.Вы всегда можете зайти в Инструменты Google для веб-мастеров и потребовать удаления URL-адресов из их индекса, что может помешать роботу Googlebot сканировать их снова, но это не гарантирует этого.