Anran Qi

视频生成研究探索运动和遮挡解除控制

研究人员对视频生成中的运动和遮挡解除控制的设计空间进行了系统性研究。该研究探讨了指定运动的不同方法，例如基于文本与基于跟踪，以及遮挡解除，使用基于文本与基于图像的方法。创建了一个包含合成场景和捕捉场景的新基准来评估这些方法，结果表明基于跟踪的引导提高了运动精度，而基于图像的引导提高了新显露内容的保真度。然而，控制遮挡解除对象的外观和动态，尤其是在它们可见后移动时，仍然是一个开放的挑战。