ranking - robots.txt 和 seo 排名

Question

拥有一个只有一行内容的 robots.txt 有什么意义，如下所示

用户代理： *

与根本没有相比？

score 1 · Accepted Answer

1

不; 这样做是没有意义的。

于 2010-02-24T14:28:03.667 回答

score 0 · Accepted Answer

不，谷歌（我们不要拐弯抹角，谷歌是你应该关心的搜索引擎）默认情况下会抓取所有内容，除非你告诉它不要这样做。

如果您想帮助 Google，请使用 google 网站管理员工具并以正确的格式提交站点地图

2 回答 2