GeoPano

新AI模型推动3D世界重建和建模

研究人员开发了从图像进行3D世界建模和重建的新方法。GeoState专注于创建用于预测建模的视图解耦几何状态，将场景动态与相机变化分离，并在Waymo等数据集上表现出改进的性能。WorldRecon提供了一个生成式框架，用于从无姿态的多视图图像重建大规模3D场景，生成详细的网格和PBR材质。GeoPano通过使用新颖的Pano-Attention机制来处理球形畸变并确保跨视图一致性，从而解决了从单个全景图进行几何精确3D重建的问题。