6

我不精通视频压缩,但目前正在从事一个使用 H.264 压缩残差图像的项目

我的问题更多的是关于视频编码器的一般性质。据我了解(正如维基百科解释的那样),块运动补偿编码器将当前帧划分为一些不重叠的块,对于它检查当前块来自的参考帧中的每个块,然后计算期望的块和运动补偿的块,然后它以某种方式对该残差进行编码。

维基百科指出:“块运动补偿的主要缺点是它在块边界处引入了不连续性(块伪影)。这些伪影以锐利的水平和垂直边缘的形式出现,人眼很容易发现并产生振铃效应(高频子带中的大系数)在用于残差帧的变换编码的傅里叶相关变换中。”

因此,由于参考帧已经包含块伪影(因为它已被编码),然后将这些块伪影移入当前块并计算残差,然后由块伪影在边界处创建的高频移位的块也将显示为残差中的不连续性。不连续性通常不利于压缩。

运动补偿块编码器是否在压缩残差之前以某种方式处理此块伪影?因为它确切地知道块是如何移动的,所以它知道块边界的位置,并且可以在编码残差之前或同时对它们做一些事情,去除/忽略这个地方不必要的高频。如果在像 H.264 这样的编解码器中执行这样的事情,有人可以解释编码器如何做到这一点的主要概念,给出一些术语等等吗?编码器如何处理参考帧中的块伪影?

4

1 回答 1

0

@Mat:这是一个很好的问题,很可能是视频编码研究的一个开放领域。简短的回答是,据我所知,今天的视频编码器并没有明确地做任何事情来处理块伪影对运动估计的影响。

在低细节区域的快速运动的情况下,如果存在明显的块伪影,运动矢量有时可能是块大小的倍数:) 或者换句话说,运动估计会找到前一帧中的块,并且不是原始图像的细节。这可能很少见;它既需要快速运动,图像的特征相当少的区域,也需要明显不足的比特率。您可能可以构建证明这一点的合成视频序列。块边界的知识是否有帮助尚不清楚;如果块边缘在下一帧的残差中引入高频分量,那么我们必须花费比特来擦除/纠正那些人为引入的分量,无论我们是否知道它们来自块伪影......即使这样,

但是,现代编解码器(例如 H.264 和 VP8)具有环路去块滤波器,换句话说,解码帧在用作参考之前被去块,这可以减少块噪声,因此可能会最大限度地减少您遇到的问题的影响正确识别。

于 2012-11-25T13:46:25.287 回答