问题标签 [noindex]

我运行一个动态站点，该站点可能会也可能不会根据用户偏好重定向某个路线。

假设它是http://clientname.example.com/maybe. 我们的后端有一个响应/maybe，但是如果客户决定他们宁愿使用他们的网站来获取该页面上的信息，我们将使用 303 重定向到他们在单独域上的页面。

我们所有的内容页面都使用该<meta name="robots" content="noindex">标签，因此谷歌不会索引我们的任何页面。但是，当我在 google 搜索“site:our_domain_name.com”时，我得到一堆结果，这些结果都可以追溯到返回 303 的那些动态路由。当我点击 google 中的搜索结果时，303 会按预期进行我到达客户的站点。我想要的是让我的拼图完全不显示在结果中。

今天早上我正在对其进行故障排除，我意识到我们的 noindex 元标记显然没有被机器人看到，因为它正在跟踪重定向，所以我在服务器上添加了一个规则，将“ X-Robot-Tag: noindex”标头添加到重定向响应中。

够了吗？如果我等待的时间足够长，这些搜索结果会被删除吗？

我的头看起来像这样： https ://www.dropbox.com/s/7phmhirwzcrzvp3/head.php?dl= 0 我想添加 noindex，关注某些页面，我已经尝试添加这个

但是我除了主页之外的所有页面都设置为noindex，follow ...有人可以告诉我是否需要更改代码或我需要将它放在哪里？

我创建了一个新网站，我不希望它被搜索引擎抓取，也不想出现在搜索结果中。

我已经创建了 robots.txt

我有一个 html 页面。我想用

但谷歌页面说它应该在页面未被 robots.txt 阻止时使用，因为 robots.txt 根本看不到 noindex 标签。

有什么方法可以同时使用 noindex 和 robots.txt 吗？

我一直在通过 htaccess 文件从谷歌索引重定向我网站上的页面时遇到问题。我一直在使用

重定向 301 http://example.com/?attachment_id=99 http://example.com

但它什么也没做..

有人知道解决此问题的更好方法吗？

我的目标是从谷歌的索引中获取它。

我已经做了一些研究并使用了这段代码

但显然它并没有删除<meta name="robots" content="noindex,follow"/>我的 WordPress 标头中的 。我正在使用 WordPress 4.2.3

我有 2 个网站。第一个是“test-www.xxxxxxx.net”，另一个是“www.xxxxx.net”。我想制作一个动态的无索引元标记。谷歌机器人可以索引我的实时站点，但我不希望它用于我的测试站点。Normaly 我可以在 _Layout.cshtml 中添加一个属性并使其动态化，如下所示。

有没有办法可以在 robots.txt 文件中制作它？在一些文章中写道“我强烈建议您尽可能使用 Noindex。 ”

所以请帮忙！我怎样才能在robot.txt中做到这一点。我不知道下面的文件是否会产生错误。

谢谢。

场景：

我拥有一个包含原创内容的网站。但是为了支持某些类别，我使用了知识共享许可的内容，这当然是重复的内容。

问题：

如果我想避免因重复内容而受到处罚，这句话是真的吗？

• 我应该提到原作者是一个公平的人。
• 我必须使用 meta noindex 来避免机器人获取内容。
• 我必须使用规范的 url 来提及原始内容及其作者。
• 我不需要将 nofollow 元数据与 noindex 一起使用，因为它还有其他用途。
• 我不必在我的网站内指向重复内容的传入链接上使用 rel="nofollow"，因为它不会被索引，因为 noindex 元标记。

我做了我的研究，这就是我从中得到的。但我不确定这一点，我想在应用任何东西之前了解它。

谢谢你。

是否可以在未翻译的帖子和页面中输入元机器人 noindex？

当然，已经翻译的版本必须保持可索引...

我有 Yoast SEO 插件兼容，但我无法更改每种语言的元机器人。

I want to add rel noindex to an div used in my site to display ads.

This is my code used in the page for dispaly:

This is the code for getFooterAd (watch above)

And down in the same page (at the bottom of the page,I have the script):

Of corse the ideal solution, is to add noindex to the div id=ad, but if is not possible, need to find some different solution.

Many thanks for your help

假设我的域是example.com. 在 上www.example.com，我设置了我的主网站（使用 Blogger 设置）并用于go.example.comURL 缩短（使用 GoDaddy 缩短服务设置）。现在，我想阻止所有go.example.comURL，以免它们被索引。

如果我在我的主博客中使用rel="noindex,nofollow"URL go.example.com，那么这会影响我的博客搜索引擎优化吗？