3

假设我的根目录中有一个 robots.txt 文件http://domain.com/robots.txt,它在子文件夹中指定了一个站点地图,该站点地图有一个指向站点地图索引的声明:

机器人.txt

Sitemap: http://domain.com/sub/sitemap_index.xml

还假设站点地图索引指向sitemap.xml相同的子目录:

站点地图索引.xml

 <?xml version="1.0" encoding="UTF-8"?>
 <sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <sitemap>
       <loc>http://domain.com/sub/sitemap-1.xml</loc>
    </sitemap>
 </sitemapindex>

在站点地图规范中,明确指出站点地图只能指定当前文件夹或子文件夹中的 URL。但是,这在我上面描述的场景中会发生变化吗?我问的原因是我知道 robots.txt 文件可以指向托管在完全不同的域上的站点地图。如果这是可能的,那么子文件夹中的站点地图(但从根目录中的 robots.txt 指向)可以指定根目录中的 URL 和所有子文件夹中的 URL。

有人确定吗?

4

1 回答 1

-1

是的,它会在您上面提到的情况下发生变化。在上述场景中,您的 Robot.txt 可以从任何子目录或主目录指向相同的域 url。

于 2013-06-04T20:50:31.327 回答