0

我最近通过网站管理员工具向 Google 提交了我的网站,但我看不到任何来自 Google 的搜索结果。谷歌网站管理员工具显示站点地图错误 - “URL 受 robots.txt 限制” - 但据我所知,该错误不应该是问题,还是我弄错了?robots.txt 可能有问题?

 User-agent: Slurp
 Disallow: /

 User-agent: Baiduspider
 Disallow: /

 User-agent: ia_archiver
 Disallow: /

 User-agent: duggmirror
 Disallow: /

 User-agent: Yandex
 Disallow: /

 User-agent: *
 Disallow: /cgi-bin/
 Disallow: /wp-admin/
 Disallow: /wp-includes/
 Disallow: /wp-content/
 Disallow: /build/
 Disallow: /css/
 Disallow: /trackback/
 Disallow: /comments/
 Disallow: /assets/graphics/
 Disallow: /assets/visual/

更新我在验证器中运行了 robots.txt 并对其进行了更新(见上文)以不返回任何警告并将其提交给 Google。谷歌抓取该网站,但它没有编制索引。我已经向 Google 网站管理员工具提交了站点地图,向 Google fetch 提交了新的 robots.txt,以及包括主页在内的 7 个不同的页面和帖子。它们都显示 Fetch 状态:成功 URL 提交到索引。

是的,有一个旧的 robots.txt 文件阻止了所有机器人。新的显然没问题,但仍然显示警告消息(见下文)

谷歌站长健康

留言您没有留言

抓取错误在过去 90 天内未检测到错误。好的!

被阻止的 URL robots.txt 文件:mysite.com/robots.txt 被阻止的 URL:1 状态:200(成功)

索引状态总索引:0

谷歌站长优化

网站地图

站点地图内容:网页 99 已提交 1 已编入索引

错误详情:0 个错误,99 个警告。 类型:警告 问题:url 被 robots.txt 阻止。 说明:站点地图包含被 robots.txt 阻止的网址。 问题计数:99 示例值: http: //mysite.com

谷歌网站管理员工具中的消息对我来说似乎很矛盾,我真的不知道我是否还好,只需要等待还是有问题。

4

0 回答 0