从视频中删除分段(例如人或鸟)的标准技术是什么？

Question

假设您正在拍摄视频(相机处于稳定位置)并且一只鸟飞过相机的视野.应该可以进行图像分割并自动从视频中删除此鸟.

这些算法的样式是什么？它们通常是如何完成的？

Answer 1

有一种称为简单图像对象提取 (SIOX)的技术- 它使用一种技术来识别静态和视频图像中的前景与背景对象。开源GIMP编辑器有一个它的实现，这里有更多关于它的信息。

从概述来看：

SIOX 代表简单交互式对象提取，是一种无需用户交互即可从静态图像中提取前景的解决方案。SIOX 速度快、抗噪能力强，因此也可用于视频分割。它避免了基于图的分割方法的许多缺点，但在不同的基准上表现大致相同。SIOX 是开放且免费的（Apache 许可证），作者有意未对该技术的任何部分申请专利。因此，在过去几年中，它已被集成到多个开源图像处理程序中。SIOX 是 GNU 图像处理程序 (GIMP) 中前景提取工具的底层算法，也是 Inkscape 中跟踪器工具的一部分。SIOX 源自 E-Chalk，其中站在电子黑板前的讲师被分段。SIOX 的变体用于机器人视觉和改进 3D 飞行时间相机分割。

这是SIOX 的 Java 参考实现的链接。

以下是 PDF 的链接，其中详细介绍了该算法的变体如何工作。

您应该能够对其进行调整，以使用帧间插值，通过使用周围帧的时间数据从视频的每个帧中删除特定的前景对象。