Клиенты на моем сайте иногда загружают файлы в узел, которые хранятся в сайтах / default / files. В идеале я хотел бы, чтобы файл был скрыт от мира. Однажды я был шокирован, когда Google нашел один личный файл в результатах поиска.
Так я могу добавить этот каталог в robots.txt?
Повлияет ли это на что-нибудь еще? По крайней мере поисковые системы не откроют эти файлы миру!