Сложная проблема с поисковыми системами: поисковые системы не могут найти страницу на моем сайте

Question

Я ломал голову, чтобы разобраться с этой проблемой, но мне не повезло！ Так что, мои ТАК, ребята, помогите мне!

Мы создали страницу на нашем сайте пять дней назад, и все было сделано как обычно (означает, что мы использовали шаблон для создания страницы). Проблема в том, что на ферме я не нашел свою страницу ни в одной из поисковых систем, хотя Google и Bing сканировали мой сайт (а именно домашнюю страницу, на которой указан URL новой страницы).

Ниже приведены шаги, которые я предпринял.

1. Два дня назад я отправил RUL этой страницы нескольким крупным поисковым системам, но пока что ничего не помогло.

2. Я проверил весь код, не нашел ни ошибки, ни сканирования, ни индекса robot.txt, ни.

3. Вчера я проверил инструмент веб-мастера Google и увлекся тем, что Google пытался просканировать страницу более 40 раз, но всегда выдает ошибку 404. Затем я проверил все URL-адреса, к которым Google обращался к странице, все они действительны и доступны.

Итак, в чем реальная проблема или возможная проблема? как я могу это исправить?

Плюс: Обычно Google индексирует новую страницу нашего веб-сайта в течение двух дней.

Answer 1

Google может занять некоторое время, чтобы проиндексировать новые страницы, особенно если сайт не пользуется популярностью или важен для Google. Так что дайте ему хотя бы месяц, чтобы быть уверенным.

Что нужно проверить:

• Страница не заблокирована robots.txt или метатегом noindex. Извините, вы сказали, что уже отметили это ...
• У вас есть хотя бы одна ссылка на страницу. Это должна быть прямая ссылка с <a href..., а не Javascript / Flash.
• Ваш сервер не блокирует никаких IP-адресов. Возможно, Google посещал слишком часто, и его поместили в черный список?

Чтобы ускорить сканирование, попробуйте следующее:

• Получите больше ссылок как на новую страницу, так и на вашу домашнюю страницу. Если Google считает, что сайт важнее, вы будете сканироваться быстрее.
• Регулярно обновляйте сайт (например, новости на главной странице).
• Зарегистрируйтесь на Инструменты для веб-мастеров Google и отправьте карту сайта XML со всеми своими страницами.
• Также в GWT есть возможность увеличить скорость сканирования. Это предназначено для больших сайтов или когда вы добавили много новых страниц, поэтому это может не иметь значения.

Answer 2

Откройте этот новый URL в вашем браузере, а затем проверьте URL на своей домашней странице. Затем проверьте, не используете ли вы URL-реферер, чтобы избежать доступа к сайту. Также проверьте вопросы членства.