Perceive-Simulate-Imitate

新AI框架从人类视频中学习机器人操控

研究人员开发了一个名为“感知-模拟-模仿”（PSI）的新框架，通过学习人类视频中的操控技能来训练机器人。PSI框架使用模拟步骤来过滤抓取轨迹数据，并为抓取适用性添加标签。这使得面向任务的抓取可以进行监督学习，这对于可能没有类人手的机器人至关重要。实验表明，PSI可以在不需要机器人特定数据的情况下高效地教授精确的操控技能，其性能优于未使用这种基于模拟的过滤的抓取生成器方法。