RobustVideoMatting

RobustVideoMatting 在线实时视频抠图去背景
具有时间引导的稳健高分辨率视频抠图
任何视频上的人工抠图 | 实时4K 70FPS+和高清 100FPS+

我们介绍了一种强大的、实时的、高分辨率的人类视频抠图方法，该方法实现了新的最先进的性能。我们的方法比以前的方法轻得多，可以在 Nvidia GTX 1080Ti GPU 上处理 76 FPS 的 4K 和 104 FPS 的高清。与大多数将视频抠图作为独立图像逐帧执行的现有方法不同，我们的方法使用循环架构来利用视频中的时间信息，并在时间连贯性和抠图质量方面取得了显着改善。此外，我们提出了一种新颖的训练策略，可以在抠图和分割目标上强制执行我们的网络。这显着提高了我们模型的稳健性。我们的方法不需要任何辅助输入，例如 trimap 或预捕获的背景图像，因此它可以广泛应用于现有的人类抠图应用程序。