研究人员开发了一种名为VERA（Video-to-Embodied Robot Action Model）的新方法，该方法利用现有的视频生成模型来控制机器人。VERA将视频规划器与特定于具身的反向动力学模型（IDM）解耦，而不是用带动作标签的数据对整个视频模型进行微调。这种方法使得视频规划器可以保持具身无关且可互换，而IDM则可以用自玩数据进行高效训练。VERA在模拟和现实世界的机器人任务中表现出色，包括使用Panda机械臂进行零样本操作和使用Allegro手进行灵巧的重新定向。 AI
影响 这项研究通过利用预训练的视频模型，可以实现更通用和适应性强的机器人控制，从而可能加速机器人技术的发展。
排序理由 这是一篇详细介绍机器人控制新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
