qt - 需要使用 QT QOpenGLWidget 渲染 YUV 帧（来自 ffmpeg 的 AVFrame）

Question

我有一个来自 FFMPEG 的 YUV 格式的 AVFrame。我想使用来自 QOpenGLWidget 和 QOpenGLFunctions 的 qt 派生类来渲染它。

我是 qt 和 OpenGL 的初学者。

有人可以帮忙吗？

谢谢阿斯温

Answer 1

好吧，实际上，如果您需要实现一个真正快速渲染的播放器，您将不得不处理缓冲区优化、离屏渲染、缓冲区流——其中的一些东西。但就 Qt 新手而言，有一些简单但有效的解决方案：

1. 试试 AV_PIX_FMT_RGBA 像素格式，将一个简单的纹理渲染成一些绘图表面矩形就足够简单了。
2. 当我想自己尝试相同的方法时，发现了这个很棒的家伙，他在这里实现了完整的工作示例。

上面链接中的 QFFmpegGLWidget 类足以让您理解。转换为 RGB 是通过片段着色器完成的，使用 GL_LUMINANCE 应用的 3 个纹理的好老技巧在那里工作。

我在自己的几乎类似的解决方案中苦苦挣扎，但是从相机（rtsp）中得到了错误、混乱的颜色。因此，请确保您在YUV420p中获得帧。如果其他像素格式更适合您，请查看这些中文资源以更深入地了解它（谷歌翻译使它们易于阅读）：

1. YUV 着色器转换
2. YUV 2 RGB 数学

祝你好运！

Answer 2

对于这些情况，我使用自定义 QQuickItem 编写了一个演示。YUV 数据上传到 GPU 并使用 OpenGL 着色器进行转换。这是带有代码的仓库：https ://github.com/carlonluca/qtyuv 。