SEO: Рекомендуется загрузить и запустить бета / незаконченную версию веб-сайта?

Question

Я работаю над этим большим сайтом, и я хочу выложить его в сеть до того, как он полностью закончится ...

Я работаю локально, и база данных становится действительно большой, поэтому я хотел загрузить веб-сайт и продолжить работу над ним на сервере, но позволяя людям входить, чтобы я мог проверить.

Вопрос в том, хорошо ли это для SEO, я имею в виду, что есть много вещей, связанных с SEO, которые являются неполными. Например: нет дружественных URL, нет карты сайта, нет файла .htacces, много «в -строительство 'секций ...

Будет ли Google наказывать меня навсегда? Как это работает? Google индексирует и получает структуру сайта только один раз или она постоянно обновляется и проверяет изменения? Будет ли использование User-agent: * Disallow: в файле robots.txt полностью помешать Google проиндексировать его? Могу ли я позже изменить файл robots.txt и снова включить его в индекс Google? Какой дп вы рекомендуете?

Answer 1

Вот как я понимаю эту проблему:

Google попадет на ваш сайт, если кто-то отправит URL вашего сайта http://www.google.com/addurl/ или если на другом уже проиндексированном веб-сайте есть ссылка на ваш сайт.

Когда Google попадает на ваш сайт, он просматривает файл robots.txt и видит, какие там правила. Если вы не разрешите индексирование с помощью кода, подобного следующему, Google не будет индексировать ваш сайт в данный момент.

User-agent: *
Disallow: /

Но Google через несколько дней снова посетит ваш сайт и сделает то же самое, что и в первый раз, если вы не нашли robots.txt или обнаружили, что вы добавили правила, позволяющие им индексироватьвеб-сайт, используя код, подобный следующему, они начнут индексировать страницы и контент веб-сайта.

User-agent: *
Allow: /

О том, как запустить веб-сайт онлайн или нет?если вы запретите использование индекса Google с помощью файла robots.txt, то нет никакой разницы, и вам лучше.

Примечание. Я не уверен, что 100% правил, о которых я упоминал в этом ответе, так как Google всегда меняет свою индексациюtechnics.

Также то, что я сказал о Google, то же самое для других поисковых систем, таких как Yahoo и Bing, но это не правило для любой поисковой системы, это просто общий способ, так что может быть другой индекс поисковой системывсе ссылки на ваш веб-сайт, пока у вас есть robots.txt, не допускают индексацию.

И я обычно ставил сценическую версию с моих сайтов для тестирования в реальной среде, прежде чем переходить на реальную версию, и использовал роботов..txt, и я так и не нашел ни одной из этих сценических ссылок в Google, Bing или Yahoo.

Answer 2

Конечно, просто поместите файл robots.txt в свой корень, чтобы вы могли быть уверены, что Google не начнет его индексировать.

Например:

User-agent: *
Disallow: /

Answer 3

Пока ваш уровень безопасности равен , а не бета-качества, хорошая идея, чтобы ваш сайт был доступен как можно раньше.

Google периодически индексирует ваш сайт и будет выполнять индексацию чаще, так как он обнаруживает более частые изменения и / или увеличение вашего рейтинга страниц.