0

我目前正在运行一个 python 脚本，将给定的用户登录到网页并在登录后导航到网站上的不同页面。我的目标是在完成加载后获得最终页面的原始 HTML。我尝试了 Render 类的不同变体，但它似乎抛出了“框架不是 Render 的属性”错误。就像我说的，我的主要目标只是获取页面的 HTML。我在做什么不正确？

url = "https://firstwebpage.com/"
url3 = "https://finaldestinationpage.com" #the page that I want the HTML from
username = "username"
password = "password"




import sys, signal

from PyQt4.QtCore import *
from PyQt4.QtGui import *
from PyQt4.QtWebKit import *

class Render(QWebPage):
    def __init__(self, app, url):
         QWebPage.__init__(self)
         self.loadFinished.connect(self._loadFinished)
         self.mainFrame().load(QUrl(url))
         app.exec_()

    def _loadFinished(self, result):
         self.frame = self.mainFrame()


def JSEval(code):
    return webpage.mainFrame().evaluateJavaScript(code)

def onLoadStarted():
    print("Loading started: %s" % webpage.mainFrame().url().toString())

def onLoadFinished(result):

    print("Loading finished: %s" % webpage.mainFrame().url().toString())
    if not result:
        print("Request failed")
        return

    JSEval("_form = document.getElementsByName('loginForm')[0];")

    JSEval("_form.username.value='%s';" % username \
        + "_form.password.value='%s';" % password \
        + "_form.submit();")
    print("Login data sent")
    if webpage.mainFrame().url().toString() == url3:
        r = Render(app,url3)  
        html = r.frame.toHtml()  #Here is where the "frame" error comes in
        print(html)



app = QApplication(sys.argv)
signal.signal(signal.SIGINT, signal.SIG_DFL)
webpage = QWebPage()
webpage.connect(webpage, SIGNAL("loadFinished(bool)"), onLoadFinished)
webpage.connect(webpage, SIGNAL("loadStarted()"), onLoadStarted)
webpage.mainFrame().load(QUrl(url))   #where user is initally logged in
webpage.mainFrame().load(QUrl(url3))
web = QWebView()
web.setPage(webpage)
web.show()


sys.exit(app.exec_())
4

1 回答 1

0

在您的Render类中，您frame在处理程序中为 设置了属性，但是当您使用它时，您会在创建实例loadFinished后立即尝试访问它。Render到那时页面尚未加载的可能性非常高，因此信号尚未触发，因此r.frame不会退出。

如果要获取页面的 html 内容，只能在页面加载完成后进行，因此最好在信号处理程序中进行。

哦，你不应该打电话app.exec_()来Render.__init__。

于 2013-09-05T19:52:03.077 回答