python - 我从哪里开始使用网络机器人？

Question

我只是想创建一个可以（最好）在网络服务器上运行的自动脚本，并且只需“点击”网页的对象。我是 Python 或任何可以使用的语言的新手，所以我想我会去这里问从哪里开始！这看起来像是我希望脚本欺骗广告或做一些非法的事情，但它只是为了与另一个网站进行交互。

Answer 1

它不一定是 Python，我已经看到它是用 PHP 和 Perl 完成的，您可能可以用许多其他语言来完成它。一般的做法是：

1) 你给你的应用一个 URL，它会向那个 URL 发出一个 HTTP 请求。我想我已经看到用 php/wget 完成了。可能还有很多其他方法可以做到这一点。

2) 扫描您想要“单击”的其他 URL 的 HTTP 响应（实际上，向它们发送 HTTP 请求），然后向这些 URL 发送请求。解析链接通常需要对正则表达式有所了解（如果您不熟悉正则表达式，请复习它 - 这是重要的东西；））。

Answer 2

我建议使用 .NET 包的 WebBrowser 控件。您可以访问所有 DOM 元素并与任何网站进行完全交互。这是一篇简短的文章

如果你仍然喜欢 python，mechanize可能是一个很好的方法。

Answer 3

我会推荐 Python机械化库。它旨在充当模拟浏览器。我用它从脚本驱动了几个 Web 界面。

Answer 4

我可能会从Twill开始——你可以使用它的脚本语言或 Python API。