Multi-layer Value Map

MVP-Nav框架赋能具身智能体进行仅RGB导航

研究人员推出MVP-Nav，一个新颖的框架，专为具身智能体设计，使其能够仅使用RGB摄像头输入在环境中导航。该系统解决了仅RGB感知固有的深度不确定性和语义-物理不匹配的挑战。MVP-Nav通过将2D语义实例投影到3D边界框中，从单目视图重建3D物理占用，创建全局空间语义表示。然后，它利用多层价值地图（MVM）将语义优先级与重建的几何结构相结合，实现物理基础的规划，并在零样本物体导航基准测试中取得最先进的性能。