4D-STraG

新框架MoGe4D从单张图像生成动态4D场景

研究人员推出了一种名为MoGe4D的新型框架，旨在从单个静态图像生成动态4D场景。该方法将场景建模为密集的4D点轨迹，整合了几何和运动以确保时空连贯性和结构稳定性。为此，创建了一个名为TrajScene-60K的新数据集，包含60,000个带有密集4D点轨迹的视频样本。该框架利用基于扩散的生成器（4D-STraG）和合成模块（4D-ViSM）来生成高质量的4D场景，并具备引人注目的新视角合成能力。