indexing - 避免谷歌索引子域

Question

据我搜索，无法找到此类问题的正确答案。

我在同一个 cPanel 帐户上安装了几个 TLD。其中一个称为主域，其余为辅助域。

当您添加辅助域时，cPanel 会自动创建子域： http://secondary.maindomain.com

我的问题是谷歌从 2 个地址索引了我的网页。

喜欢：

secondary.com/blabla.html

secondary.maindomain.com/blabla.html

如何从谷歌中删除这些索引？以及如何避免这些子域被索引以备将来使用？

Answer 1

为此，您可以将 robots.txt 添加到文档根路径并添加“禁止：”以避免任何搜索引擎或 Google 为您的文件或目录编制索引。

例如，为了避免在 google 中为您的子域编制索引，请在 robots.txt 中添加以下条目，并将 robots.txt 放在您子域的文档根路径中：

用户代理：Googlebot

不允许： /

或所有搜索引擎：

用户代理： *

不允许： /