0

我有一个VPS。我已经在该 IP 地址上安装了 Drupal。我的网站没有注册 URL。本站IP地址仅供个人参考。

如果没有传统的 URL，我的 IP 地址是否可以在搜索引擎上被索引和找到？会被抓取吗？

我也没有从另一个 VPS 平台上的其他域名指向它的 A 记录。据我所知，我是唯一一个知道这个 IP 地址甚至去那里添加或引用内容的人。

4

2 回答 2

2

我知道搜索引擎可以通过三种方式了解网站​​的存在。

  1. 您直接将域提交给他们。
  2. 其他人链接到该域。
  3. 搜索引擎监视所有域注册（谷歌可以很容易地做到这一点，因为他们自己运行 DNS），并尝试标准前缀（例如 www）。

除非有人链接到它，否则似乎没有一种自动方法来发现带有内容的 IP 地址。

如果它纯粹是供个人参考，并且您想确保没有其他人可以访问它，那么您无论如何都应该实施安全性。不要仅仅依靠没有人知道IP。

于 2013-11-09T00:59:43.553 回答
0

如果没有传统的 URL，我的 IP 地址是否可以在搜索引擎上被索引和找到？

是的，如果您可以从外部访问它，那么搜索引擎也可以。如果您不希望它被编入索引，请添加一个“robots.txt”，请求该站点不被编入索引。请记住，爬虫不必尊重这一点，但主要的却必须这样做。

至于搜索引擎如何发现其他地方没有索引的 IP 地址，这可能是他们永远不会知道的“秘密武器”的一部分。也许您的 IP 以前曾被使用过，并且之前已在该上下文中被编入索引；如果是这样，一个四处寻找的搜索引擎可能会期待那个旧网站，但会很乐意为您的新网站编制索引。

或者，同一网络块中的其他 IP 地址可能正在使用中，搜索引擎会“快速尝试”以查看它是否响应端口 80 (http) 或 443 (https)。如果他们这样做了，它就会被添加到他们的索引中（或者如果你的 robots.txt 请求它，则不要抓取列表）。

如果您特别不希望搜索引擎看到您的内容，您可以将默认主页设为空白，并将您的 Drupal 安装放在一个子目录中。搜索引擎将没有任何东西可以索引除了一个空白的主页。

于 2013-11-08T22:30:48.133 回答