UniDepth

机器人使用预训练视觉模型进行动态避障

研究人员开发了一种新颖的方法，使机器人在非结构化的室外环境中能够动态避开障碍物，而无需大量的机器人特定训练数据。该方法利用预训练的视觉模型UniDepth进行深度估计，并扩展了SuperPoint和SuperGlue特征对应管道来跟踪3D中的关键点。通过计算这些关键点的时间碰撞（TTC），系统可以选择适当的运动原语来引导机器人避开潜在的碰撞。该方法证明了高数据效率，仅需少量数据即可进行超参数调整，并在检测和响应各种物理障碍物方面取得了显著成功。