我想处理捕获的视频。我将尝试捕捉纸上手写/纸上绘画的视频。但是我不想在通过 p5.js 进行直播时在纸上展示手或笔。这可以使用机器学习来完成吗？知道如何实现吗？
问问题
82 次
2 回答
0
您可能不需要走完整的 ML 对象分割路线。
如果纸张的位置和照明是恒定的（或至少是已知的），您可以尝试一些简单的启发式方法，将当前帧中的像素与较短的历史进行比较，并使用最恒定的像素值。随着绘图的新部分“变得恒定”，可能会有一些滞后，因此也许您可以尝试对累积进行一些修改，例如像素是否为白色并且变为黑色。
于 2021-03-15T01:51:28.023 回答
0
如果我理解正确，您想检测手在图像中的哪个位置在该位置绘制叠加层，对吗？
如果是这样，您可以使用 YOLO更多信息来检测手的位置。
您可以下载一些训练有素的网络，也许它们已经足够好，也许您必须自己训练以方便使用。
yolo 和 JS 也有一些自由度https://github.com/ModelDepot/tfjs-yolo-tiny
于 2021-03-12T00:08:56.790 回答