search - 删除 Robot.txt 后如何重新获得索引

Question

在构建 Webiste 时，我在服务器上创建了一个 robots.txt，以防止尚未完成的应用程序进入 Google 的索引...

现在我已经完成了网站，我删除了 robots.txt，我希望我的网站会出现在 Google 上，因为 robots.txt 已经消失了！

但这并没有发生！我现在已经删除了 robots.txt 大约 3 到 4 周，但该网站仍然没有出现 :(

在删除robot.txt 后，是否需要做些什么才能再次进入搜索引擎的索引？或者这不是假设自然发生的吗？

或者这是我不够耐心的情况？

score 3 · Accepted Answer

3

您可以在此处添加您的网站以供抓取。

于 2010-07-25T16:35:19.797 回答

score 1 · Accepted Answer

创建站点地图文件并将其提交给 google、bing 和其他人。对于谷歌，您可以使用他们的网站管理员工具。

score 1 · Accepted Answer

我只需设置一个新的默认 robots.txt 文件：

User-agent: *
Disallow:

还要注册 Google Webmaster Tools 并设置站点地图文件。这可能有助于 Google 认识到事情发生了变化。

score 1 · Accepted Answer

作为第一步，在网站管理员工具中验证网站。所以你可以看到谷歌爬虫访问和拒绝的原因。

score 0 · Accepted Answer

为了在 Google 搜索结果中获得最佳位置，您绝对应该查看此文档：

5 回答 5