c++ - 在网络摄像头图像中查找 ROI

Question

我有一个视频序列，其一帧如下所示。我试图使用角检测来找到纸张上矩形的边缘。

我正在使用 Shi-Tomasi 角检测器。但是，它会从图像的背景中检测到我不需要的许多其他东西。我怎样才能将我的投资回报率缩小到只有一张纸。

第二个问题：
在检测到角后的视频序列中，我需要在矩形内播放另一个视频。我试图使用单个线程来执行此操作，但它会导致很多滞后和抖动。我能做些什么来提高我的处理速度。我是否需要为每个视频使用多个线程。一个视频来自网络摄像头，另一个来自硬盘驱动器。

Answer 1

这是我为之前的一个项目所做的。

1. 找到图片中的所有轮廓，并用 4 个角形状近似每个轮廓
2. 找到适合您自己条件的矩形，例如面积 > 1000000 的矩形
3. （可选）您会注意到，由于 3D 世界，您的矩形不是真正的矩形。您可能想要进行透视变换以获得正确的矩形
4. 在找到的矩形上涂上绿色或任何纹理，因为您已经从上方有 4 个角

至于生涩的播放，您可能不仅要使用 GPU 多线程，还要使用加密来提高速度。