django - 如何避免被谷歌抓取/惩罚

Question

概述

我想使用真实域名在生产服务器上使用随机数据测试一些 Django 网站，但这些网站将是简单的测试，可能存在重复数据（很可能不遵循 Google 规则）。我知道通常为此您使用开发/登台/虚拟盒来完成此类任务，但我确实想直接使用带有真实 DNS 的生产盒。

现在，我对网站开发和 SEO 有点陌生，我不想与 SEO 和谷歌混为一谈。

在这里进行的正确方法是什么？我应该尽量避免以某种方式被谷歌索引/抓取吗？还有其他建议吗？

Answer 1

您可以禁止对页面进行完整索引，然后稍后（完成编码后）再次激活它。

这可能是最好的方法，因为谷歌不会抓取“坏页面”（例如，当您的网站仍在开发中时），因此到目前为止您不会获得排名（如果您想查找它，称为页面排名）。