StreamRig

StreamRig 框架利用冻结的基础模型增强多相机里程计

研究人员开发了 StreamRig，这是一个旨在改进移动机器人和车辆多相机里程计的新型框架。该系统利用同步相机架的几何结构，通过使用冻结的 3D 基础模型和专门的 Rig-Resampler 来压缩特征。StreamRig 采用因果注意力机制和键值缓存以及轻量级姿态回归头，只有一小部分参数需要训练。与现有单目流式传输和相机架感知离线模型相比，该框架在多个数据集上实现了更低的平移和旋转漂移，即使仅在模拟环境中训练并在真实世界中进行零样本评估。