链接元素指向主要用于当前应用程序演示目的的资源,而锚元素则完全指向其他应用程序。
搜索引擎可以并且将尝试解释某些链接元素资源,包括但不一定是 RSS 提要独有的。
无论您是否告知,Google 都会看到链接并继续关注它们(甚至请求 robots.txt 有意排除的路径)。
您可以做的是使用 rel="nofollow" 告诉搜索引擎您的应用程序不认可锚点中的应用程序,从而有效地否定了对该应用程序的“投票”。
<a href="http://www.example.com/" rel="nofollow">external application</a>
nofollow 的主要目的是消除垃圾邮件,尤其是论坛垃圾邮件。用户生成的所有锚元素通常使用 nofollow 否定搜索引擎操作,并且基本上只能有效地捕捉那些不知道合法内容和垃圾邮件之间区别的不知情的人。
Wiki 在这里有更多关于 nofollow 的信息...
http://en.wikipedia.org/wiki/Nofollow
您应该仅将链接元素用于样式表、RSS 提要、网站图标和 OpenSearch。
根据您的说明,您需要使用元机器人元素。有三个选项...
archive / noarchive - 告诉搜索引擎它是否可以通过搜索引擎直接访问页面的缓存版本(例如 Google 的缓存链接)。强烈建议使用 noarchive 来防止内容抓取工具绕过您的安全并通过 Google 窃取您的内容。
index / noindex - 告诉搜索引擎它是否可以索引此页面。这不能阻止搜索引擎查看它,但是如果有您不希望它看到的内容。
follow / nofollow - 告诉搜索引擎您是否批准关注页面上的所有链接或不关注覆盖每个单独的锚点和链接元素设置的链接。
例如,不要缓存页面,做索引并关注链接......
<meta name="robots" content="noarchive, index, follow" />