DAVIS-Traj

Manifold4D 通过新颖的流形去噪方法改进视频重拍

研究人员开发了 Manifold4D，一种用于视频重拍的新颖方法，可改进相机轨迹控制和视觉质量。与提供渲染几何作为显式条件的先前方法不同，Manifold4D 将此信息直接注入流匹配过程的初始噪声中。这使得模型能够专注于源视频进行后续去噪步骤，减少对可能不完美的渲染的依赖。在 DAVIS-Traj 基准和 Vista4D 数据集上的评估表明，Manifold4D 在相机控制精度方面显著优于现有方法，并保持了高视频保真度。