Это будет работать для всех версий TYPO3.Для TYPO3 V9.x используйте решение от Thomas Löffler .
Ваша конфигурация сервера (apache? .Htaccess?) Передаст любой запрос источнику, который являетсянет файла, нет каталога и нет символической ссылки на файл index.php, который является TYPO3.
В вашем случае у вас нет файла robots.txt.Так что TYPO3 хочет с этим справиться, но у него нет ресурса с таким именем.Это создает ошибку 404 в TYPO3.
Чтобы предотвратить это, jst создайте файл robots.txt на вашем веб-сервере в папке DOCUMENT_ROOT
Так что в любом случае является файлом robots.txt.
Это способ рассказать поисковым системам, как вести себя на вашем сервере.Он содержит рекомендации для сканеров поисковых систем, когда следует прекратить сканирование (например, папка typo3_src).Он запрашивается сканерами автоматически и регулярно.