Нам нужно было скрыть фрагменты информации на страницах от GoogleBot.Поскольку информация не была чрезвычайно конфиденциальной, мы использовали document.write () - s, чтобы поисковые роботы не индексировали рассматриваемый контент.
Позже, в третьем квартале 2011 года, я обнаружил, что GoogleBot сделал индексирование скриптового контента, поэтому теперь я совершенно уверен, что Google индексирует гораздо больше, чем просто извлекает URL из контента, хотяэто действительно нигде глубоко не документировано.