Я создаю веб-сайты уже несколько лет, в основном на php.На некоторых сайтах есть cronjobs, которые обычно запускаются раз в день.Файлы php, которые запускают cronjobs, хранятся на сервере вместе с файлами, которые доставляют страницы сайта.
Я знаю, что различные сканеры, законные и нет, посещают различные страницы моих сайтов.Теперь, если сканер посетит один из моих файлов cronjob, это активирует cronjob, иногда с нежелательными результатами.
Я уверен, что этого никогда не было, и, хотя я благодарен за это,Я пытаюсь понять почему.Конечно, нигде нет ссылок на мои URL-адреса cronjob, но я уверен, что различные сканеры посещали другие страницы, даже если на них никогда не было ссылок.
Что другие разработчики делают для решения этой проблемы?Поместить строку в файл robots.txt?Установить права доступа к php-файлам cronjob-relte?
Заранее спасибо.