9

我需要一些关于我的问题的解释。

我的标题上的示例已经添加

<meta name="robots" content="noindex, nofollow" />

我应该再次将规范标签添加到我的标题中吗？

<link rel=”canonical” href=”http://www.example.com/product.php?item=big-fish” />

让我知道 ：）

规范标签

更新

我们知道规范标签目前也被 google、yahoo 和 live search 支持。noindex 和 nofollow 怎么样？yahoo 和 live (bing) 也支持吗？

4

9 回答 9

12

谷歌，雅虎！, 和Bing (Live)支持noindex和nofollow元指令。

noindex告诉搜索引擎不要费心缓存您的页面以包含在他们的结果中。

nofollow告诉他们您不希望页面上的任何链接被跟踪。

在同一页面上添加canonical标签不会有什么坏处，但除非您与其中一位搜索工程师交谈，否则效果未知。

于 2009-07-25T13:58:15.807 回答
6

没有多大意义？无论如何，搜索引擎都不会为您的页面编制索引！

尽管我想如果您将来希望将其编入索引，那么这将是一个好习惯，但前提是通过不同的 URL 访问相同的页面内容。

于 2009-07-25T04:06:42.813 回答
4

只是为了一劳永逸地澄清一些事情

实现这个

<meta name="robots" content="noindex, nofollow" />

不仅告诉机器人不要索引页面，而且阻止它们在页面上找到的链接中传递 PageRank。但这本身不是问题。问题是这样的页面变成了死角页面，或者称为“悬空页面”或“节点”，这会导致 PageRank 的稀释，因为汁液将从 PR 图中移除。

也就是说，最佳元将实施：

<meta name="robots" content="noindex,noarchive,nosnippet,follow" />

如果该页面是重复的，最好也实现一个规范标签，链接到您想要索引的页面版本。如果没有，至少到最相关的页面。

单独使用规范标签不会阻止索引。至少不是在所有情况下。例如，如果一个页面的 PR5 具有指向具有 PR 1 的相同页面的规范链接，则 Google 可以忽略规范标签并将具有 PR 5 的页面编入索引。

因此，为避免任何误解，规范标签不是 301 重定向。也就是说，带有规范标签的页面仍然可以累积 PageRank。这取决于有多少果汁到达该页面。

因此，最后添加“跟随”元机器人指令的另一个原因是有意义的。

根据 Google 网络垃圾邮件团队负责人 Matt Cutts 的说法，只使用“noindex”或“noindex,noarchive,nosnippet”而不在末尾添加“follow”指令，可能是 Googlebot 可能会搞砸而不遵循上面的链接页。

我希望以上所有帮助！

于 2012-02-28T19:21:50.733 回答
3

既然你告诉爬虫不要索引也不要跟随，我不明白你为什么应该使用规范。

仅当您在不同 URL 下具有相同内容时，才应使用规范。

于 2009-07-25T04:09:20.000 回答
3

Robots.txt 文件中包含的页面告诉搜索引擎不要抓取这些页面。然而，Robots.txt 文件中的页面仍然可以累积 PageRank，并且可以在搜索结果中编入索引，Matt Cutts 说。

NoIndex标签意味着搜索引擎可以抓取页面并赋予它PageRank，但是搜索引擎不会对页面进行索引，它不会出现在搜索结果中。同样，带有 NoIndex 标签的页面可以累积 PageRank，因为链接仍然从 NoIndex 页面向外跟随。

带有 NoFollow 标签的页面会告诉搜索引擎，是的，该页面可以被抓取，但根本不会在 Google 的索引中显示该页面，并且不遵循任何传出链接，并且该页面没有 PageRank 流动。

于 2011-09-23T08:22:15.077 回答
1

如果有不止一种方法来寻址页面，则只需要“规范”标签。例如，如果“ http://www.example.com/products/big-fish ”和“ http://www.example.com/product.php?item=big-fish ”都指向同一个页面（即，一个是另一个的别名），使用“规范”。

于 2009-07-25T04:08:05.980 回答
1

与此同时，谷歌员工已经回答了这个问题，请在此处查看：http ://www.google.com/support/forum/p/Webmasters/thread?tid=79b4544fb7e1cb3c&hl=en

基本上使用 noindex 或规范。

于 2011-10-19T07:29:30.957 回答
0

总结 Eric Enge & Co 的《SEO 的艺术》一书，加上谷歌搜索文章和论坛，我建议如下。此外，基本上我们假设您的网站使用规范链接来避免重复页面问题，并且从搜索引擎的角度来看，所有其他带有 cgi 参数的页面 URL 都被视为不需要的页面（尽管功能齐全且可供访问者使用）。

  1. 规范 URL 页面 - 产品、信息、文章允许除非规范链接（不需要的页面）之外的所有内容。这样做我们没有给他们任何果汁和评级奖金。其他页面也不会从中受益。但我们会降低不需要的页面评级，而有用的页面在搜索结果中会更高。

    <a href="mysite.com/catalogue/product.php?id=123" rel="NoFollow" >

  2. 重复页面 - 产品、打印 搜索引擎读取页面代码，从一开始就识别规范链接，将其视为有用页面的等价物，并将其从索引中排除为不需要的。SE机器人已经阅读了页面，所以它仍然可以检查链接。因此，我们禁止使用非规范 URL 跟踪其他不需要的页面上的链接。为了使这个页面更等同于它的规范目标，我们省略了其他禁止参数（规范标签就足够了）。

    <link rel="canonical" href="mysite.com/catalogue/my-product/" >

    <a href="mysite.com/catalogue/product.php?id=123" rel="NoFollow" >

  3. 技术页面 - 注册、购物篮、订购 禁止机器人阅读所有这些页面，甚至无法访问页面代码中的任何标签。但是访问者仍然可以访问这些页面，并且机器人会在他们网站上您不需要的页面上找到一个链接。因此，我们还需要所有禁止标签来让搜索引擎忽略此页面，并且不要跟踪不需要的页面上的链接。

    Disallow:/catalogue/product.* # 在 robots.txt 文件中。

    < meta name="robots" content="noindex,noarchive,nocache,nosnippet" />

    <a href="mysite.com/catalogue/product.php?id=123" rel="NoFollow" >

于 2014-08-28T15:00:31.167 回答
0

“在索引页面上，使用 Canonical 关键字。在非索引页面上，使用 NoIndex。”

https://helloacm.com/the-golden-rules-of-removing-duplicate-pages-by-using-noindex-or-canonical/

于 2016-07-14T20:53:11.810 回答