Как исключить часть веб-страницы из индексации Google?

Question

Существует способ исключить полные страницы из индексации Google. Но есть ли способ специально исключить определенные части веб-страницы из сканирования Google? Например, исключить боковую панель, которая обычно содержит несвязанное содержимое?

Answer 1

Вы можете включить с тегом IFRAME ту часть страницы, которую вы хотите скрыть в Googlebot, и заблокировать индексацию файла, включенного в файл robots.txt.

добавьте iframe для включения боковой панели на своей странице

<iframe src ="sidebar.asp" width="100%" height="300">
    </iframe>

здесь правила, которые будут добавлены в файл robots.txt для блокировки паука

user-agent: *
disallow: sidebar.asp

Answer 2

Если вы делаете это для AdSense, вот статья о том, как исключить контент из скребка. Если вы не хотите, чтобы Google следовал по ссылкам, вы можете присвоить им атрибут rel="nofollow". В противном случае, боюсь, вам здесь не повезет.

Что-то еще, что вы могли бы сделать, но я не обязательно рекомендую делать, это обнаружение пользовательского агента перед рендерингом вашей страницы, и если это паук или бот, то не показывает части вашей страницы хочу исключить.