从视频中重建绘图序列

reconstruction drawing sequence from video

我有一个视频,记录了画家用铅笔作画的顺序。 我想从视频中重建序列。 我有 google 一些关键字,如 drawing sequence reconstruction sketch reconstruction 并且搜索过 moving object detection 但找不到我想找到的东西。

I want to know how to detect and recognize the drawing between different frames. 我认为 line detect 算法可能有效但失败了。像素比较似乎不是个好主意。因为新图可能会与旧图重叠。

你能给我一些我可以阅读的信息或一些关键字来搜索吗?很抱歉,因为我不熟悉计算机图像处理。

我建议您寻找基于 SURF/ORB 的图像匹配。

  • 将铅笔图像作为模板并在图像上执行匹配以跟踪铅笔,这可以使用 opencv/matlab 计算机视觉库轻松完成。 image matchingsift, surf, orb matcherfeature detection
  • 跟踪铅笔的位置后,您可以使用匹配信息查找铅笔笔尖的位置 keypointinliersgoodmatches
  • 如果纸张相对于相机是静态的,您可以搜索铅笔笔尖左侧的强度值变化,例如 select ROI 在您执行搜索之前图像的像素变化时
  • 你必须指定特定的阈值来区分由于绘制到阴影而导致的强度变化image thresholding

希望这个回答对您有所帮助