研究人员开发了EgoForesight,一个旨在通过有效利用嘈杂的自我中心动作来改进机器人策略学习的新型框架。该系统集成了视觉-语言-动作能力,使其能够从机器人演示和自我中心视频中学习。EgoForesight通过减少不可靠的动作标签的影响并采用演示结果作为补充监督,来应对自我中心数据中不可靠动作标签的挑战。该框架采用联合视觉-动作流,将未来视觉表示预测与动作生成相结合,从而增强了可靠性感知动作学习和结果驱动的表示迁移。这种方法在经过广泛预训练后,在现实世界的开环动作MSE方面降低了20.5%,在RoboCasa少样本成功率方面提高了8.1个百分点。 AI
影响 通过改进对嘈杂数据的处理能力,增强了机器人学习能力,可能加速实际应用。
排序理由 该项目是一篇研究论文,详细介绍了一种用于机器人策略学习的新框架。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- arXivLabs
- CatalyzeX Code Finder for Papers
- Connected Papers
- CORE Recommender
- DagsHub
- EgoForesight
- Gotit.pub
- Hugging Face
- Influence Flower
- Litmaps
- RoboCasa
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →