问题标签 [nofollow]

我们的 SEO 团队希望向蜘蛛打开我们的主要动态搜索结果页面，并从元标记中删除“nofollow”。蜘蛛目前可以通过允许 robots.txt 中的路径访问它，但在元标记中使用“nofollow”子句来防止蜘蛛超出第一页。

<meta name="robots" content="index,nofollow">

我担心如果我们删除“nofollow”，对我们的搜索系统的影响将是灾难性的，因为蜘蛛将开始爬取结果集中的所有页面。我将不胜感激有关以下方面的建议：

1）有没有办法从元标记中删除“nofollow”，但防止蜘蛛只关注页面上的某些链接？我读过关于 rel="nofollow" 的不同意见，这是一个可行的选择吗？

<a rel="nofollow" href="http://www.mysite.com/paginglink" >Next Page</a>

2）有没有办法控制蜘蛛走多远的“深度”？如果他们点击几页然后停止，那也不会那么糟糕。

3）我们的搜索结果页面有标准的下一个/上一个链接，理论上这会导致蜘蛛无限递归地点击页面，这对搜索引擎优化有什么影响？

我了解不同蜘蛛的行为不同，但我主要关注的是大玩家，例如 Google、Yahoo、MSN。

请注意，我们的搜索结果页面和分页链接对机器人不友好，因为它们没有被重写并且有一个 ?name=value 查询字符串，但据我所知，蜘蛛不再只是在看到 '? ' 因为结果页面正在以不错的页面排名被索引。

我需要一些关于我的问题的解释。

我的标题上的示例已经添加

我应该再次将规范标签添加到我的标题中吗？

让我知道 ：）

规范标签

更新

我们知道规范标签目前也被 google、yahoo 和 live search 支持。noindex 和 nofollow 怎么样？yahoo 和 live (bing) 也支持吗？

我将查看哪个文件以将 nofollow 标签添加到我的分层导航？

谷歌在抓取网站时是否会关注按钮和表单输入？我正在将 rel="nofollow" 标签添加到我不希望谷歌关注的链接，但我不确定是否需要将它们添加到按钮。

例如“添加到购物车”按钮。

谢谢

我在主导航中有一个不同类别的在线商店。IE。A类、B类等

我在主导航中也有一个链接，称为“销售项目”。它指向一个页面，该页面列出了 A 类和 B 类都在售的商品。

我应该在销售项目链接中添加一个 rel="nofollow" 标签吗？

我从哪里开始呢？我知道如何向页面添加元标记，我猜 Page#onBeforeRender 是一个不错的选择。但是：如何确定当前 URL 是否包含“？wicket：”？

打电话

只返回问号前的部分，getPageParameters() 返回null。

提前感谢您的灵感:)

我在 SO 用户页面上注意到所有 url 都有 rel="nofollow me" （我想把 nofollow 放在我的网站上，所以我在这里查看了 SO 的作用）。“我”部分有什么作用？

我正在构建一个用户内容解析器并添加一个自动链接解析器。我正在添加一个对话框，确认用户想要访问所链接的特定站点。这有两个原因。反网络钓鱼和垃圾邮件打击。但是，我希望能够禁用常用网站的对话和 nofollow 添加，所以我正在建立一个白名单。是否有任何常见的白名单或者我应该从头开始构建一个？

好的，所以我已经制作了这个函数，它可以很好地将大多数网址（如 pies.com 或 www.cakes.com）转换为实际的链接标签。

我想更新此功能以添加no-follow标签到我的竞争对手的链接，

所以我会有某些关键字（竞争对手的名字）来nofollow，例如，如果我的网站是关于烘焙的，我可能想要：

是否可以在if(contains x){ add y}我的正则表达式中实现这一点？

这就是所谓的“回顾”吗？

我需要创建没有跟随链接link_to。

我正在寻找这样的东西：

<%= link_to "example", example_path, :target => "_blank" %>

但是当然没有跟随。