问题标签 [noindex]

我正在为各种事情使用美妙的 Yoast 插件，但主要用于无索引和无关注页面。我们是一个基于 PPC 的网站，因此我们删除了搜索。现在客户想要它回来，但我需要 wordpress 内置搜索不返回大量无索引页面。

我知道您可以内置排除各种元描述。

我打算将此作为一个开始： https ://css-tricks.com/forums/topic/using-wps-pre_get_posts-to-exclude-post-with-meta_key/

问题 - 我要查找的术语是什么 - meta-no-index=no??

为什么 Yoast 默认不这样做？

在 Analytics 上，我有太多重复标题的问题。当我从哪里看到这些重复的标题时，我发现我的过滤器有问题。例如，我有一个带有 url ribarnik.com/shop/baitrunner-st-fa 的产品，但是有些东西创建了产品 /shop/baitrunner-st-fa?sort=pd.name&order=ASC&limit=100 的链接。我不知道如何创建此链接，但我想将所有这些链接（带过滤器）添加为“noindex”。

我也必须对所有产品进行规范标签，但谷歌再次说我有重复的标题。

请帮忙，真的！我有超过 20 000 种产品，每个产品都有 5-10 个重复的标题，所以......请帮忙！

我的意图是使用 PHP 获取链接，也许使用简单的 PHP DOM 解析器（或类似的东西）解析内容并查找 H1-H6 标记。但在此之前，我需要确定该页面是否被索引。

除了解析内容和搜索<meta name="robots" content="noindex">或类似内容之外，有没有办法可以检查页面是否也在 robots.txt 中设置为 noindex？

I have a Privacy Policy page on my website www.domain/privacy-policy/ which I would like to noindex with the X Robots Tag. I have tried the following code but it does not match

Question has been edited to include full htaccess file for clarity.

我想对我的 drupal 7 网站上的多个节点应用 no index no follow。在这些节点上应用 no index no follow 后，我删除了它们。no index no follow 会不会生效，因为节点被删除了。如果在应用 no index no follow 后删除节点是错误的方法，那么我应该取消发布这些节点吗？因为我不想在网站上显示这些节点以及谷歌搜索。请建议我更好的解决方案。

我可以使用 robots.txt，也可以使用自定义 Django 中间件，但我想知道这是否可以在视图级别完成。

我很难找到有关如何通过 htaccess 完全不索引一个特定子域的信息（据我了解，这是最好的方法？），对我来说重要的是，只有一个子域及其文件永远不会被索引或可爬网。

我有一个使用 Plesk 的 Apache 服务器，子域用于我们用于时事通讯活动等的电子邮件软件。

子域是“邮件”（例如https://mail.test.com），我的目标是只制作“邮件”noindex，因为由于某种原因，该软件具有可能最终损害我们的一般用途等的 seo 功能。

我有一个 pdf，我想保护它并且不希望搜索引擎对其进行索引。

目前，我的链接如下：

我可以将nofollow标签添加到rel标签吗？

然后我会将这两者分为昏迷还是不昏迷？

目前正在尝试rel=nofollow noopener没有昏迷。

我可以添加noindex到同一个标签吗？

这行得通吗？

我在我的网站上使用多个结构化数据块：

这将在我的网站的搜索结果下方显示另一个栏，以直接访问该页面以查看有关该事件的更多详细信息。

但是如果提供像http://www.example.com/?id=123谷歌这样的链接也会normal在搜索结果中显示这个链接作为链接。

但是如果noindex为这个网页设置谷歌也会拒绝列出事件，不是吗？

有人知道解决方案吗？

这是我的意思的图像：

我有一个大型网站（超过 40,000 个页面）并且希望最小化 Google 正在索引的页面级别，即我希望仅索引 500 个页面。

我似乎只能找到Noindex'ing pages 的选项，对我来说 Noindex 39,500 个页面没有意义。

我的 Robots.txt 文件的示例。