研究人员开发了Real2Sem2Real (R2Sem2R) 这一新颖流程,可将单个RGB视频演示转换为数千个机器人演示。该方法利用DINOv3蒸馏的高斯溅射来跟踪物体的SE(3)姿态,性能优于现有技术。R2Sem2R然后对数字对象“表亲”进行语义对齐,匹配整个对象和功能区域,并将人类抓取映射到可行的机器人抓取。在IsaacSim或MuJoCo中创建的机器人演示可以快速生成,从而能够使用最少的人类输入有效地在各种对象实例上训练视觉-语言-动作策略。 AI
影响 能够从最少的人类输入中快速生成多样化的机器人训练数据,可能加速机器人学习。
排序理由 该集群包含一篇详细介绍机器人学习新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
- DINOv3
- FoundationPose
- Hugging Face
- IsaacSim
- MuJoCo
- R2Sem2R
- Real2Sem2Real
- SE(3)-Transformers: 3D Roto-Translation Equivariant Attention Networks
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →