Индексация Google и Ajax

Question

Начиная с Google теперь может выполнять AJAX и JavaScript для индексации , что это значит для SEO для Google?

Что мы должны сделать по-другому, и что мы можем изменить, чтобы Googleботы не ползают через все .

Раньше у нас была роскошь, которой не было, но теперь кажется, что это так.И это может увеличить пропускную способность из-за сканеров Google.

Как мы можем запретить Google (и любой другой поисковой системе в будущем) индексировать наш код ajax?

Answer 1

Во-первых, только потому, что Google делает это, не значит, что кто-то другой делает. Это также не означает, что они официально делают это для кого-то, кроме сайтов, перечисленных в статье, или что они делают это еще хорошо.

Во-вторых, вы можете включить файл robots.txt, который скажет Google не индексировать определенные страницы.

Вот несколько ссылок для получения дополнительной информации о файлах robots.txt и сканерах Google:

http://www.google.com/support/webmasters/bin/answer.py?answer=156449
http://code.google.com/web/controlcrawlindex/docs/getting_started.html
http://code.google.com/web/controlcrawlindex/docs/robots_txt.html

http://code.google.com/web/controlcrawlindex/docs/crawlers.html