computer-vision - 计算机视觉：窗口的形状和大小如何影响视差？

Question

我希望有人向我解释方形窗口和矩形窗口如何影响视差图的计算，这里我说的是固定大小。

我有两张取自 SIR 的该物体的图像（上面的随机点图案） 在此处输入图像描述

我使用 4 x 16 窗口 (MSE = 0.1167)、16 x 4 窗口 (MSE = 0.1333) 和 8 x 8 窗口 (MSE = 0.1216) 计算了差异。（我无法放置图像）。

我需要知道如何判断垂直或水平矩形窗口是否优于其兼容的方形窗口。MSE 足够了吗？我还应该考虑图像的特征吗？

另外，如果有人指导我重建 3D 模型，我将不胜感激。

提前致谢。

Answer 1

窗口大小是一种权衡。

窗口越大，它们包含有用的纹理特征以提供良好的视差估计的机会就越高。如果它们很小，它们将更有可能包含不提供有意义信息的平滑区域。

OTOH，窗口越大，包含深度不连续性的窗口就越多。这些是由于不同深度的多个对象而导致的图像边缘，其中视差导致一个图像包含被另一图像遮挡的像素，并使窗口包含多个视差值（在不同的子区域中）。这些是有趣的地方，但块匹配方法实际上失败了。如果您的窗口较小，则它们将包含混合深度，从而提供更稳定的结果。