Похоже, мой robots.txt
файл не найден роботом Google, поскольку я продолжаю получать 404 сообщения об ошибках на Stack Logger
.
Мое приложение структурировано так:
/www
- index.html
- sendMessage.php
app.yaml
robots.txt
Вот мой app.yaml
файл:
runtime: php55
service: default
api_version: 1
threadsafe: true
automatic_scaling:
min_idle_instances: 1
instance_class: F4_1G
handlers:
- url: /sendMessage.php
script: sendMessage.php
secure: always
- url: /
static_files: www/index.html
upload: www/index.html
secure: always
- url: /robots.txt
static_files: robots.txt
upload: robots.txt
- url: /(.*)
static_files: www/\1
upload: www/(.*)
secure: always
А затем мой robots.txt
файл:
# Rule 1
User-agent: Googlebot
Disallow: /nogooglebot/
# Rule 2
User-agent: *
Allow: /
Любая помощь будет принята с благодарностью!Спасибо :)