当Google的蜘蛛抓取我的一个站点时，它们从选择列表中提取数据作为页面数据。我完全理解为什么会发生这种情况，但问题是，它能以任何方式被阻止吗?我不想阻止整个页面被抓取，而只想阻止选择列表数据。
问题如下:当搜索Google时，选择列表数据被显示为页面摘要，而不是内容。描述标签是专门为帮助SEO和向潜在的站点访问者提供有用信息而编写的，但其预期功能尚未实现。
查看此示例案例https://www.google.com/search?q=alaskan klee kai网站%3Awiki-pet.com
这会损害网站搜索性能的有效性，因为超过1个页面在搜索结果中显示相同的数据。有超过200页的完全相同的选择列表，允许方便的导航。选择列表不会被删除。
我的一个想法是在页面有 之后用onload()脚本填充内容。完全加载. .什么好主意吗?
(编辑]
查看搜索结果#3 &5包含这个文本:"所有品种- - -，阿芬平切犬，阿富汗猎犬，艾尔代尔梗，阿克巴什犬，秋田犬，阿拉帕哈蓝血牛头犬，阿拉斯加克利凯，阿拉斯加……"
这是直接从关联页面的选择列表中的内容。
在服务器上，检查用户代理是否与Googlebot(或其他流行的蜘蛛，如bingbot)匹配，并且不呈现该内容。