indexing - 阻止某些地址被抓取 Robots.txt

Question

我被要求（为了改善 SEO 结果）从 Robots.txt 中删除某个网址。

我正在努力（搜索引擎优化不是我的强项）弄清楚如何阻止某个域，即使两个地址都指向同一个网站。

例如：

http://foo.example.com -- 我需要停止被索引的
网址 http://www.examplefoo.com -- 我想被索引的网址

据我所知，使用 disallow / 只会阻止两者（因为它们是同一个站点）

有什么帮助吗？！对不起，如果这是一个愚蠢的问题..

Answer 1

第 1 步：如果您的第一个域启动，您应该将其重定向到您的第二个域。

示例（宽度 htaccess）：

RewriteCond %{HTTP_HOST} ^www.xxx.ir$ [NC,OR]

RewriteCond %{HTTP_HOST} ^xxx.ir$ [NC,OR]

RewriteCond %{HTTP_HOST} ^yyy.com$ [NC]

RewriteRule ^(.*)$ http://www.yyy.com/$1 [R=301,L]

第 2 步：您应该通过在网站管理员工具（目录全部）中删除 url 来删除所有 url（从第一个域）

祝你好运