python - 不同视频帧的变化检测

Question

我正在分析视频，并且正在录制执行某些操作的设备（平板电脑）。我为两个不同的设备记录它。但是“内容”是一样的。我把内容放在引号中，因为一个视频的光照、纵横比、边框不同。但是两个视频的动作是一样的。

如果您看到这四个图像，您将更好地了解我要问的内容。

图像 1（设备 1）

图像 2（设备 1）

图像 3（设备 2）

图像 4（设备 2）

前两个图像来自设备 1，接下来的两个图像来自设备 2。有没有一种方法可以检测到帧中的变化（第一张图像到第二张图像）。动作正在放大，当它放大到一个点并捕捉到变化时（Image2）。同样，我也想在其他视频中捕捉到相同的变化。所以就像试图从 Image3 中捕获 Image 4 一样。

我使用过曼哈顿、FD、颜色直方图等算法。它们都不能正常工作。

Answer 1

您可以计算参考帧文本的平均字高和宽度（图 3），并将其与测试图像的文本（图 4）进行比较。这将能够检测到放大动作。为此，我认为二值化后进行连通分量分析就足够了。这应该给你一个放大倍数的估计。谷歌有很多算法可用。

然后您可以使用图像插值技术进行缩放。

祝你好运。