2 
Ip: 67.195.112.247 
Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp) 

System.Web.HttpException: The file '/1338.aspx' does not exist.

IP：67.195.112.247
主机：b3091104.crawl.yahoo.net
国家：美国

4

2 回答 2

1

尝试在开放网络上搜索“ http://yoururl/1138.aspx ”，可能有人创建了此链接，而雅虎正在尝试关注它。

于 2010-03-10T20:09:15.357 回答
0

事实证明，Slurp 已经索引了我用于旧日志分析器项目的示例日志文件

https://bitbucket.org/mrshrinkray/projects/src/fa550b822a52/Statmagic/Statmagic.Testapp/ExampleLogs/ex071110.log

2007-11-10 19:44:35 W3SVC421807 WEB150 216.177.83.9 GET /1338.aspx - 80 - 66.249.70.48 HTTP/1.1 Mozilla/5.0+(兼容;+Googlebot/2.​​1;++http://www.google .com/bot.html)

日志文件有 Googlebot 请求 URL 的记录，我不知道 Googlebot 是如何获得不存在的 url，但它是 Slurp 喜欢模仿 Googlebot 的方式。

于 2012-06-25T09:37:03.417 回答