Странные проблемы с обновлением Robots.txt

Question

У меня очень странная проблема с robots.txt ... Я регулярно обновлял своих роботов в течение многих месяцев, без каких-либо проблем. Несколько дней назад вместо этого у меня есть эта проблема. Я обновил роботов в папке FTP, и файл обновился прямо. Теперь, если я увижу это в браузерах, я увижу старую версию. Даже гугл не обновляет его, так как несколько дней. И если я захожу в поисковую консоль, в функции, как Google, я вижу это:

Итак, слева вы видите, что я вижу в своем браузере и что видит Google, а справа вы можете видеть мой настоящий файл, как он выглядит в ftp. Разница в последних 5 строках. Также помощь сайта, смотрите, загружая это из другого состояния, правильной версии, версии файла. Вместо этого я и Google видим старую ... Я не знаю, может ли это быть полезным, но я использую Google DNS.

Редактировать: попытался изменить DNS на моем компьютере с телекоммуникационным DNS, и теперь я вижу новых роботов. Но Google все еще не видит его

Answer 1

проблема была с кешем cloudflare .. Сбросил это проблема была решена

Answer 2

У меня была такая же проблема, поскольку мой robots.txt не показывался бы Google правильно через несколько дней. Google может занять некоторое время, чтобы просканировать ваш сайт и проверить ваш robots.txt - иногда это делается сразу же, иногда это может занять до нескольких дней. Я бы посоветовал вам немного подождать и проверить еще раз. Может быть, даже попытаться с компьютера с другой сетью (или мобильной сети).

Я рекомендую вам попробовать и загрузить (если вы этого еще не сделали) свой файл в Google для более быстрого сканирования. Проверьте эту ссылку - https://support.google.com/webmasters/answer/6078399?hl=en