ProPainter ——视频修复利器（消除、扩边、修复）

ProPainter 是一个用于视频修复的开源框架，通过改进传播和变换技术来填补视频中的缺失区域。它主要由三个关键组件组成：递归流完成、双域传播和面具引导的稀疏变换器。ProPainter 利用高效的递归流完成网络和图像与特征域联合传播，从而实现更可靠和有效的传播。其面具引导的稀疏变换器通过仅处理必要的子集来提高效率并减少内存消耗。

ProPainter包含三个关键组件:循环流完成、双域传播和掩码引导的来完成损坏的流场。然后，我们进行传播的图像和特征域，这是联合训用了一个高效的循环流完成网络练。这种方法使我们能够从全球和局部时间框架探索对应关系，从而实现更可靠和有效的传播。随后的掩码引导的稀疏Transformer块使用时空注意力细化传播的功能，通过只考虑令牌的一个子集的稀疏策略进行辅助。这提高了效率，除低了内存消耗，同时保持了性能。