3

使用 WebEngineView 保存网页图像可以正常工作,但是当我想滚动并保存另一张图像时,生成的图像不会显示网站已滚动(它显示网页的顶部)。

我的问题是:如何在 QWebEngineView 中向下滚动,然后保存显示正确滚动网页的屏幕截图?

我在网页顶部截屏,向下滚动约 700 像素,等待 javascript 回调触发,然后再截屏。javascript 和回调工作正常(我观察到 QWebEngineView 滚动)。

    this->setScrollPageHandlerFunc([&] (const QVariant &result) {
        saveSnapshotScroll();
    });
    saveSnapshotScroll();
    view->page()->runJavaScript("scrollPage();",this->scrollPageHandlerFunc);

截图代码:

void MainWindow::saveSnapshotScroll()
{

QPixmap pixmap(this->size());
view->page()->view()->render(&pixmap);
pixmap.save(QString::number(QDateTime::currentMSecsSinceEpoch()) + ".png");

}

Javascript:

function scrollPage()
{
    var y = qt_jq.jQuery(window).scrollTop();
    qt_jq.jQuery(window).scrollTop(y+708);
}

更新: 我发现如果我将 saveSnapshotScroll() 设置在约 100 毫秒或更多的计时器上(即在滚动后等待 100 毫秒以保存快照),而不是在页面滚动后立即截取屏幕截图,它可以工作。因此,在执行滚动时的 javascript 回调与滚动页面的呈现之间存在一些延迟。我不会称这是一个完整的解决方案,因此我只更新帖子。我真正想要的是来自 QT 的回调,它表示渲染的网页已在屏幕缓冲区中更新。这样的事情存在吗?

4

1 回答 1

1

runJavaScript触发回调时,脚本完成。但是,窗口应该重新粉刷(或至少准备重新粉刷)才能使用QWidget::render(&pixmap)

似乎某些绘制事件可用于检测小部件的重新绘制。不幸的是,QWebEngineView几乎没有捕获任何事件(除了鼠标进入和退出,最近添加了未处理的键盘事件),例如参见“[QTBUG-43602] WebEngineView does not handle mouse events”

几乎所有事件(如鼠标移动或绘画)都由QWebEngineView派生RenderWidgetHostViewQtDelegateWidgetQOpenGLWidget.

可以捕获新的子QWebEngineView类型QOpenGLWidget并在该子节点上安装所有需要事件的事件过滤器挂钩。

该解决方案依赖于QWebEngineView. 因此,未来的 Qt 版本可能不支持它。但是,它可用于具有当前 Qt 版本的项目。也许将来会实现一些更方便的捕获QWebEngineView事件的接口。

下面的例子实现了这个魔法:

#ifndef WEBENGINEVIEW_H
#define WEBENGINEVIEW_H

#include <QEvent>
#include <QChildEvent>
#include <QPointer>
#include <QOpenGLWidget>
#include <QWebEngineView>

class WebEngineView : public QWebEngineView
{
    Q_OBJECT

private:
    QPointer<QOpenGLWidget> child_;

protected:
    bool eventFilter(QObject *obj, QEvent *ev)
    {
        // emit delegatePaint on paint event of the last added QOpenGLWidget child
        if (obj == child_ && ev->type() == QEvent::Paint)
            emit delegatePaint();

        return QWebEngineView::eventFilter(obj, ev);
    }

public:
    WebEngineView(QWidget *parent = nullptr) :
        QWebEngineView(parent), child_(nullptr)
    {
    }

    bool event(QEvent * ev)
    {
        if (ev->type() == QEvent::ChildAdded) {
            QChildEvent *child_ev = static_cast<QChildEvent*>(ev);

            // there is also QObject child that should be ignored here;
            // use only QOpenGLWidget child
            QOpenGLWidget *w = qobject_cast<QOpenGLWidget*>(child_ev->child());
            if (w) {
                child_ = w;
                w->installEventFilter(this);
            }
        }

        return QWebEngineView::event(ev);
    }

signals:
    void delegatePaint();
};

#endif // WEBENGINEVIEW_H

子添加被WebEngineView::event. 子指针被保存并且事件过滤器被安装在这个子节点上。在子绘画事件中,信号WebEngineView::delegatePaintWebEngineView::eventFilter.

delegatePaint当某些脚本更改 Web 视图或由于鼠标悬停或任何其他原因突出显示某些 Web 控件时,始终会发出信号。

在实际执行QOpenGLWidget::paintEvent(). 因此,看起来只有在完整绘制完成后才需要拍摄页面快照(可能使用异步Qt::QueuedConnection连接)。看来,在事件过滤器中的这一点上,delegatePaint由于 JavaScript 已准备好,因此触发了该小部件render()。但是,可能由于某些其他原因(例如由于窗口激活)而接收到绘制事件,这可能会导致警告消息:

QWidget::repaint:检测到递归重绘

因此,最好还是使用它Qt::QueuedConnection来避免此类问题。

现在的诀窍是delegatePaint在 JavaScipt 完成时只使用一次该事件。该部分可以根据实际需要进行调整。

由于某些脚本或加载新图像,页面视图可以随时重新绘制。假设我们需要捕获页面在脚本执行后的外观。因此,可以仅在脚本回调中将delegatePaint信号连接到插槽并在. 以下测试在循环中为三个不同的滚动位置生成快照。类似的快照由文件夹组织,并且:saveSnapshotScrollsaveSnapshotScroll012

void MainWindow::runJavaScript()
{
    // count initialized by 0
    if (++count > 1000)
        return;

    QString script = QString::asprintf("window.scrollTo(0, %d);", 708 * (count % 3));

    view->page()->runJavaScript(script,
        [&] (const QVariant&) {
            connect(view, &WebEngineView::delegatePaint,
                    this, &MainWindow::saveSnapshotScroll,
                    Qt::QueuedConnection);
        }
    );
}

void MainWindow::saveSnapshotScroll()
{
    disconnect(view, &WebEngineView::delegatePaint,
               this, &MainWindow::saveSnapshotScroll);

    QPixmap pixmap(view->size());
    view->render(&pixmap);
    pixmap.save(QString::number(count % 3) + "/" +
                QString::number(QDateTime::currentMSecsSinceEpoch()) + ".png");

    runJavaScript();
}

在那些由其他窗口交互触发事件的情况下,可能会得到错误的快照。如果在脚本执行期间没有触摸窗口,则结果是正确的。


为避免处理错误的绘制事件,可以将 Web 视图像素图与以前保存的图像进行比较。如果这些图像之间的差异很小,则意味着应该跳过当前的绘制事件,并且需要等待下一个绘制事件:

void MainWindow::saveSnapshotScroll()
{
    QSharedPointer<QPixmap> pixmap(new QPixmap(view->size()));
    view->render(pixmap.data());

    // wait for another paint event if difference with saved pixmap is small
    if (!isNewPicture(pixmap))
        return;

    pixmap->save(QString::number(count % 3) + "/" +
              QString::number(QDateTime::currentMSecsSinceEpoch()) + ".png");

    disconnect(view, &WebEngineView::delegatePaint,
               this, &MainWindow::saveSnapshotScroll);

    runJavaScript();
}

bool MainWindow::isNewPicture(QSharedPointer<QPixmap> pixmap)
{
    // initialized by nullptr
    if (!prevPixmap) {
        prevPixmap = pixmap;
        return true;
    }

    // <pixmap> XOR <previously saved pixmap>
    QPixmap prev(*prevPixmap);
    QPainter painter;
    painter.begin(&prev);
    painter.setCompositionMode(QPainter::RasterOp_SourceXorDestination);
    painter.drawPixmap(0, 0, *pixmap);
    painter.end();

    // check difference
    QByteArray buf;
    QBuffer buffer(&buf);
    buffer.open(QIODevice::WriteOnly);
    prev.save(&buffer, "PNG");

    // almost empty images (small difference) have large compression ratio
    const int compression_threshold = 50;
    bool isNew = prev.width() * prev.height() / buf.size() < compression_threshold;

    if (isNew)
        prevPixmap = pixmap;

    return isNew;
}

上述解决方案只是一个示例,它基于 Qt 提供的工具。可以考虑其他比较算法。相似度阈值也可以根据具体情况进行调整。如果滚动视图与前一个图像非常相似(例如,在较长的空白区域的情况下),则此类比较会受到限制。

于 2015-11-06T21:37:05.917 回答