我正在使用 Python、PyQt4 和 QtWebKit 将网页加载到基本浏览器中以检查数据。
但是,有一个小问题。我正在尝试获取加载页面上每个 iframe 的内容和 src。我正在使用webView.page().mainFrame().childFrames()来获取框架。问题是,childFrames()仅在浏览器可见时才加载框架。例如,当您的浏览器位于页面顶部时,childFrames()不会加载页面底部的 iframe。有没有一种方法或设置可以调整我可以获得所有广告的位置?我附上了我的“浏览器”的来源。当页面完成加载时尝试向下滚动。观察控制台,您会看到 iframe 是动态加载的。请帮忙。
from PyQt4 import QtGui, QtCore, QtWebKit
import sys
import unicodedata
class Sp():
def Main(self):
self.webView = QtWebKit.QWebView()
self.webView.load(QtCore.QUrl("http://www.msnbc.msn.com/id/41197838/ns/us_news-environment/"))
self.webView.show()
QtCore.QObject.connect(self.webView,QtCore.SIGNAL("loadFinished(bool)"),self.Load)
def Load(self):
frame = self.webView.page().mainFrame()
children = frame.childFrames()
fT = []
for x in children:
print "=========================================="
print unicodedata.normalize('NFKD', unicode(x.url().toString())).encode('ascii','ignore')
print "=========================================="
fT.append([unicode(x.url().toString()),unicode(x.toHtml()),[]])
for x in range(len(fT)):
f = children[x]
tl = []
for fx in f.childFrames():
print "___________________________________________"
print unicodedata.normalize('NFKD', unicode(fx.url().toString())).encode('ascii','ignore')
print "___________________________________________"
tl.append([unicode(fx.url().toString()),unicode(fx.toHtml()),[]])
fT[x][2] = tl
app = QtGui.QApplication(sys.argv)
s = Sp()
s.Main()
app.exec_()