本期分享由南洋理工出品的视频修改工具 ProPainter,它的功能包括去除水印,视频对象删除,视频外画,以及视频完成等
ProPainter 使用非常简单,用户只需将需要处理的视频导入工具中,然后点击相应的功能按钮即可实现一键移除移动物体或水印。工具会自动分析视频的每一帧,并根据物体的运动轨迹或水印的位置进行准确的识别和删除。
这个工具的移除视频内移动物体的功能可以帮助用户轻松去除视频中的人物、车辆等移动物体,使画面更加干净和专注。另外,ProPainter 还能一键移除视频水印,无论是因为版权保护还是其他原因导致的水印,用户只需选择相应的功能,工具会自动检测并删除视频中的水印,使得视频更加原汁原味。
ProPainter 的简单操作和高效识别能力使得视频编辑变得更加方便和高效,无论是个人用户还是专业视频编辑人员,都能从 ProPainter 中获得极大的便利和效益。
ProPainter 功能包括:
1. 对象删除:从视频中删除对象。
2. 去除水印:从视频中去除水印。
3. 视频完成:完成蒙版视频。
4. 视频外画:扩展视频的视图。
ProPainter 包含三个关键组件:循环流完成、双域传播和掩模引导稀疏 Transformer。首先,我们采用高效的循环流完成网络来完成损坏的流场。然后,我们在联合训练的图像域和特征域中执行传播。这种方法使我们能够探索全局和局部时间框架的对应关系,从而产生更可靠和有效的传播。随后的掩模引导稀疏 Transformer 块使用时空注意力细化传播的特征,并辅以仅考虑令牌子集的稀疏策略。这可以提高效率并减少内存消耗,同时保持性能。
目前工具代码和模型已公开
感兴趣的朋友,可以自己去试试。