1

我正在为使用 Direct3D9Ex 接口的应用程序设置 VideoRenderer,但是当我使用大纹理(桌面分辨率)时,视频开始变慢。

我正在使用 DirectShow,但我发现 H264 存在一些问题,因此我决定选择 Media Foundation。我已经搜索了很多关于它的内容,但我不知道如何使用 DXVA 渲染视频,因此,我使用 MF_SOURCE_READER_ENABLE_ADVANCED_VIDEO_PROCESSING 和 MFVideoFormat_RGB32 使用 IMFSourceReader(异步)读取样本,因此我可以复制到我的表面然后使其正常。

这就是我创建 SourceReader 的方式。

    MFCreateAttributes(&m_Attributes, 4);

    m_Attributes->SetUnknown(MF_SOURCE_READER_D3D_MANAGER, GRAPHICSDEVICE->GetDeviceManager());
    m_Attributes->SetUnknown(MF_SOURCE_READER_ASYNC_CALLBACK, this);
    m_Attributes->SetUINT32(MF_READWRITE_ENABLE_HARDWARE_TRANSFORMS, TRUE);
    m_Attributes->SetUINT32(MF_SOURCE_READER_ENABLE_ADVANCED_VIDEO_PROCESSING, TRUE);

    MFCreateSourceReaderFromURL(L"Video.mp4", m_Attributes, &m_SourceReader);
    MFCreateMediaType(&m_MediaType);
    MFSetAttributeSize(m_MediaType, MF_MT_FRAME_SIZE, m_VideoWidth, m_VideoHeight);

    m_MediaType->SetGUID(MF_MT_MAJOR_TYPE, MFMediaType_Video);
    m_MediaType->SetGUID(MF_MT_SUBTYPE, MFVideoFormat_RGB32);

然后我发布一个 ReadSample 并在我的 Update 方法中,我这样做:

if (WaitForSingleObject(m_SampleEvent, 0) == WAIT_OBJECT_0)
    {
        if (m_SourceReader)
        {
            m_SourceReader->ReadSample(MF_SOURCE_READER_FIRST_VIDEO_STREAM, 0, nullptr, nullptr, nullptr, nullptr);
        }
    }

这是我的 OnReadSample 回调的一部分,它只是将一个表面复制到另一个表面。

IDirect3DSurface9 * pSampleSurface = nullptr;

if (SUCCEEDED(GetD3DSurfaceFromSample(Sample, &pSampleSurface)))
{
    D3DLOCKED_RECT SampleRect;
    if (FAILED(pSampleSurface->LockRect(&SampleRect, nullptr, D3DLOCK_READONLY)))
    {
        pSampleSurface->Release();
        goto Quit;
    }

    BYTE * pVideo = (BYTE*)SampleRect.pBits;

    D3DLOCKED_RECT TextureRect;
    if (FAILED(m_Texture->LockRect(0, &TextureRect, nullptr, D3DLOCK_DISCARD)))
    {
        pSampleSurface->UnlockRect();
        pSampleSurface->Release();
        goto Quit;
    }

    BYTE * pDest = (BYTE*)TextureRect.pBits;

    for (unsigned int i = 0; i < m_VideoHeight; i++)
    {
        CopyMemory(pDest, pVideo, m_VideoWidth * 4);
        pDest += TextureRect.Pitch;
        pVideo += SampleRect.Pitch;
    }

    m_Texture->UnlockRect(0);
    pSampleSurface->UnlockRect();
    pSampleSurface->Release();
}

所以,我的实际结果对于调试环境是可以接受的,但是当我将应用程序分辨率更改为桌面分辨率(从 800x600 到 1366x768)时,事情开始变得慢很多。

我必须使用 DXVA 之类的东西吗?我可以调整当前代码以更快地运行吗?我在哪里可以找到一些关于它的好样本?

4

1 回答 1

1

这里与速度相关的主要因素是能够在 GPU 上将其解码为纹理,然后尽可能使用此纹理,而无需将数据下载到系统内存中。

你正在做MF_SOURCE_READER_D3D_MANAGER,最终你从纹理中读取数据。ReadSample所以 DXVA 已经为你工作了,它应该很快就能工作(也就是说,你本身不需要加速)。IDirect3DSurface9::LockRect并且访问位可能会很慢,您可能希望禁用读取纹理步骤并比较性能以进行验证。

于 2018-12-24T15:09:14.503 回答