我正在使用 robotsparses 库,并且正在尝试以下示例程序:
http://docs.python.org/library/robotparser.html
我的代码目前是-
import robotparser
def TestMain():
#Check robots.txt
rp = robotparser.RobotFileParser()
rp.set_url("http://www.musi-cal.com/robots.txt")
rp.read()
rp.can_fetch("*", "http://www.musi-cal.com/cgi-bin/search?city=San+Francisco")
我遇到的问题是,当我运行代码时,它运行成功,但没有返回任何内容,有人知道为什么吗?
谢谢