bry*_*sai 7 web-crawler google-webmaster-tools
有一种方法可以从谷歌的索引中排除完整的页面.但有没有办法明确地从谷歌的爬行中排除某个网页的某些部分？例如,排除通常包含无关内容的侧栏？
小智 5
您可以使用 IFRAME 标记包含您想要在 Googlebot 中隐藏的页面部分，并阻止对 robots.txt 文件中包含的文件进行索引。
添加 iframe 以在页面中包含侧边栏
<iframe src ="sidebar.asp" width="100%" height="300">
</iframe>
这里是要在 robots.txt 文件中添加的用于阻止蜘蛛的规则
user-agent: *
disallow: sidebar.asp