9

故事

我正在开发一个流畅的 60 FPS 1080p(全高清)视频传输应用程序,它以 x264 编码,通过 LAN 将编码数据发送到接收设备,然后使用 OpenH264 的解码器对其进行解码。我设法让它工作,它工作正常且稳定,但我发现它非常慢(大约 20 FPS 而不是所需的 60 FPS)。

问题

我进行了广泛的测试,发现问题出在 OpenH264 解码器上。

解码器使用了我的 i5-2500 @ 3.9Ghz 的完整内核(总共 25% 的 CPU 使用率),这太高了。尽管解码器是单线程的,但我在 Media Player Classic 上测试了原始数据,其播放(60 FPS)导致 CPU 使用率仅为 0.3%。(将渲染引擎切换到“旧视频渲染”时,CPU 使用率增加到 12.8-14.4%——见评论)

所以我的问题是:我可以做哪些优化来加快解码过程,我做错了什么?我无法想象 OpenH264 就是这么慢。

额外信息

  • 编码器可以使用大约 20% 的 CPU 轻松推出 60 FPS 1080p。
  • 连接是有线局域网,可以推送> 10MB / s,所以没有问题。
  • 发送方和接收方 PC 都有 8GB RAM。

代码

以下是与解码器相关的所有 C++ 代码:

ISVCDecoder *decoder;
SBufferInfo bufferInfo;
SDecodingParam decodingParam;
uint8_t** yuvData;

void init(int width, int height) {
    WelsCreateDecoder(&decoder);
    decodingParam = { 0 };
    decodingParam.sVideoProperty.eVideoBsType = VIDEO_BITSTREAM_AVC;
    decoder->Initialize(&decodingParam);
    bufferInfo = { 0 };

    yuvData = new uint8_t*[3];
    yuvData[0] = new uint8_t[width*height];
    yuvData[1] = new uint8_t[width*height / 4];
    yuvData[2] = new uint8_t[width*height / 4];
}

bool decode(cont unsigned char* rawEncodedData, int rawEncodedDataLength, uint8_t** yuvData) {
    int err = decoder->DecodeFrameNoDelay(rawEncodedData, rawEncodedDataLength, yuvData, &bufferInfo);
    if(err != 0) {
        std::cout << "H264 decoding failed. Error code: " << err << "." << std::endl;
        return false;
    }
    return true;
}
4

1 回答 1

1

一个相对未优化的基于 CPU 的 H.264 解码器很容易变得那么慢。如果您在 PC 上并且有硬件 H.264 解码器 - 您不妨使用它。

我会尝试:https ://software.intel.com/en-us/media-sdk-support/code-samples

于 2016-11-08T23:43:15.617 回答