Как исключить часть веб-страницы от индексации Google?
Существует способ исключить полную страницу (страницы) из индексации Google. Но существует ли способ конкретно исключить определенную часть (части) веб-страницы от Google, сканирования? Например, исключите боковую панель, которая обычно содержит несвязанное содержание?
2 ответа
Вы можете включить с помощью IFRAME-тега ту часть страницы, которую хотите спрятать в Googlebot и заблокировать индексацию файла, включенного в файл robots.txt.
добавьте iframe для включения боковой панели на вашей странице
<iframe src ="sidebar.asp" width="100%" height="300">
</iframe>
сюда правила, которые должны быть добавлены в файл robots.txt для блокирования паука
user-agent: *
disallow: sidebar.asp
Если вы делаете это для AdSense, вот статья о том, как исключить содержимое из скрепера. Если вы не хотите, чтобы Google переходил по ссылкам, вы можете дать им атрибут rel="nofollow". В противном случае, боюсь, вам может не повезти.
Что-то еще, что вы могли бы сделать , но я бы не рекомендовал делать, это обнаружить пользовательского агента перед отрисовкой вашей страницы, а если это паук или бот, не показывая части вашей страницы, которые вы хотите исключить.
.