研究人员开发了 Pano2World,一个将单个室内全景图转换为完全可探索的 3D 高斯场景的新颖系统。该方法通过重建粗糙的 3D 高斯代理来绕过迭代完成和视频生成模型的限制。然后,该代理用于从附近姿势渲染引导全景图,并将其输入全景扩散模型。该模型采用视图感知注意力路由来强制跨视图一致性,同时利用引导全景图的几何约束和源全景图的语义引导。潜在特征适配器通过将隐藏特征蒸馏到场景潜在表示中来进一步完善过程,然后将其解码为最终的 3D 高斯场景,在新视图合成基准测试中表现优于现有方法。 AI
影响 能够从单个图像创建可探索的 3D 环境,可能对虚拟现实和内容创作产生影响。
排序理由 详细介绍三维场景生成新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →