Файл robots.txt по умолчанию отключает индексацию поисковой системы? И я не могу заменить это своим собственным. Что я пропустил?
Это значение по умолчанию и фиксированное значение:
User-agent: * Disallow: /
Согласно slack, файлы robots.txt на поддоменах * .surge.sh заблокированы, чтобы предотвратить обработку ссылок ... sad.