ISSUE 1
URL 受 robots.txt 限制
这意味着当 google 的“蜘蛛”试图为您的站点地图编制索引时,它们会被您的站点地图阻止。如果您不使用该文件,您可以删除它,或者确保您没有阻止站点地图,甚至更糟糕的是整个站点都不会被索引。
以下 robots.txt 将阻止所有爬虫将整个网站编入索引:
User-agent: *
Disallow: /
只需删除尾部斜杠即可防止此类实例:
User-agent: *
Disallow:
ISSUE 2
错误 2 站点地图是 HTML 您的站点地图似乎是一个 HTML 页面。请改用支持的站点地图格式。
首先,HTML 站点地图在某些情况下对最终用户和搜索引擎蜘蛛很有用,但对于您的官方站点地图,Google 坚持将其格式化为 XML。
她的标记示例
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>http://www.example.com/</loc>
<lastmod>2005-01-01</lastmod>
<changefreq>monthly</changefreq>
<priority>0.8</priority>
</url>
此外,如果您的站点很大,或者您不想手动创建站点地图,那么有一些不错的在线站点地图生成器。
如:
http ://www.xml-sitemaps.com/
http://www.sitemapdoc.com/