robots.txt - 停止谷歌索引子域

Question

我有子域“客户”用于为我们的客户测试网站，我不希望它被编入索引。我在 robots.txt（在我们网站的根目录）中设置了这个：

User-agent: *
disallow: /subdom/klient/*

但我不确定它是否真的有效，因为我现在在谷歌结果中找到了测试站点......

哪里可能有问题，或者我们如何阻止谷歌和其他机器人索引这个文件夹......？

谢谢

Answer 1

您可以通过将 arobots.txt放在子域的根目录中来做到这一点。

因此，在您的 中klient.example.com，放置robots.txt具有以下内容的 a：

User-agent: *
Disallow: /

如果您想删除已编入索引的页面，请使用您的子域创建一个新的 Web 控制台站点并删除那里的编入索引的页面。