不时查看我的搜索日志，我注意到到目前为止我的搜索引擎最大的用户是 google-bot。是什么赋予了？它是否正在寻找可能无法通过导航直接访问的内容？如果是这样，它如何知道要查找哪些单词和短语（它们非常相关）。它会检查网站上最受欢迎的关键字吗？我知道我似乎在这里回答了我自己的问题，但这实际上只是从第一原则中解决的。我想听听知道他们在说什么的人（即不是我）。
问问题
457 次
2 回答
8
如果您的搜索表单的方法是 get 而不是 post，则每个搜索都有自己的 url，人们可能会将这些 url 发布到其他地方。或者，如果您有一个（可能是不经意间）可公开访问的 webstats 页面列出了这些 url，这是搜索引擎偶然发现您的内部搜索 url 的另一种常见方式。我看到的第三种方式是在其页面上列出最近搜索的网站，但这是故意的。“MySQL 性能博客”在某种程度上做到了这一点，因此从谷歌搜索他们的网站会产生数百页类似的搜索，即使他们都没有找到他们正在寻找的内容。
编辑：看起来有时会这样做，但只有 GET 表单：http: //googlewebmastercentral.blogspot.com/2008/04/crawling-through-html-forms.html
于 2009-08-04T06:00:09.170 回答
1
Google 将使用您网站上出现在搜索框中的字词来尝试查找其他方式无法找到的页面。
谷歌表示，在过去的几个月里，它一直在“少数”“高质量”网站上填写表格以获取信息。它进入了那些形式中的是什么词？自动选择网站上出现的单词，复选框和下拉菜单也被选中。 http://searchengineland.com/google-now-fills-out-forms-crawls-results-13760
于 2012-01-29T12:39:20.560 回答