（北京，2023年10月26日）近日，新加坡南洋理工大学S-Lab团队研发的AI视频修复项目——ProPainter正式亮相。该项目通过结合双域传播和蒙版引导的稀疏视频Transformer技术，有效提升了视频修复的性能，为电影后期制作、历史视频资料修复以及社交媒体内容创作等领域带来了新的可能性。
ProPainter：AI视频修复的革新者
ProPainter项目由南洋理工大学S-Lab团队研发，旨在通过人工智能技术实现视频修复。该项目结合了图像域和特征域的传播优势，利用全局对应关系进行可靠的信息传播。此外，ProPainter还采用了高效的循环光流完成网络，为后续的双域传播提供精确的光流信息。
主要功能：对象移除、视频补全、视频外扩
ProPainter具有三大主要功能：对象移除、视频补全和视频外扩。对象移除功能能够自动检测并去除视频中不需要的物体，如广告牌、行人等，同时保持背景的连贯性和自然性。视频补全功能则能智能预测填补视频采集或传输过程中损坏或缺失的部分，恢复视频完整性和流畅性。视频外扩技术则能根据视频内容智能生成新的背景和场景，提供更宽广的视觉体验。
技术原理：双域传播与蒙版引导稀疏视频Transformer
ProPainter的技术原理主要基于双域传播和蒙版引导稀疏视频Transformer。双域传播结合了图像域和特征域的传播优势，利用全局对应关系进行可靠的信息传播。蒙版引导稀疏视频Transformer则利用稀疏注意力机制减少计算复杂度和内存使用，提高视频修复的性能。
应用场景：电影、历史、社交媒体等
ProPainter在多个领域具有广泛的应用前景。在电影后期制作中，ProPainter可以去除不需要的物体或标志，如广告牌或穿帮镜头，同时补全因技术问题导致的画面缺失部分。在历史视频资料修复方面，ProPainter能填补缺失的帧或区域，恢复视频的原始面貌。在社交媒体内容创作中，ProPainter可以去除视频中的水印，提升视频的视觉效果和创意表达。
总结
ProPainter的推出标志着AI视频修复技术迈入了新的阶段。南洋理工大学S-Lab团队的研究成果将为电影、历史、社交媒体等领域带来更多可能性，推动视频修复技术的不断发展。未来，ProPainter有望在更多领域发挥重要作用，为人类创造更多价值。
Views: 1