AFFORD2ACT

机器人操作策略使用稀疏关键点，优于密集视觉输入

研究人员开发了AFFORD2ACT，一种利用稀疏2D关键点而非密集视觉特征的机器人操作新方法。该方法将输入表示显著简化为仅19个关键点（38个坐标），但在六项真实世界操作任务中表现优于传统的RGB和RGB-D输入。该系统利用语言条件化的可供性模型来识别任务相关区域并选择关键点，在减少演示数据的情况下表现出改进的性能和鲁棒性，尽管它仍然容易受到跟踪错误和遮挡的影响。