Duolikun Danier

AI模型中的视图一致性可改善视频生成的3D一致性

研究人员调查了视图一致性表示在相机控制的视频生成模型中的重要性。他们的发现表明，具有更强视图一致性内部表示的模型可以生成具有更好3D一致性的视频。为了进一步探索这一点，他们开发了ViCoDR，一种直接在训练过程中强制执行视图一致性的方法，该方法提高了各种视频生成任务的3D一致性。ViCoDR损失也被发现是一个可靠的辅助训练目标，比现有替代方案更有效地增强了3D一致性，尽管它需要额外的计算。