Genie Sim PanoWorld

新管线可从单个全景图生成无限3D世界

研究人员开发了Genie Sim PanoWorld，一种从单个全景图像生成无限室内3D世界的新颖管线。该系统绕过了每场景优化或多视图捕获的需要，解决了现有方法在度量轨迹控制和处理大范围遮挡方面的局限性。该管线采用两阶段方法，首先通过潜在视频扩散模型生成可控轨迹的全景视频，然后将该视频重建为高保真3D高斯场景。与基于几何条件的基线相比，此输出可直接用于具身AI应用，在视频生成和下游3D重建方面均表现出卓越的性能。