研究人员开发了FlowHOI,一个用于生成逼真的手-物体交互的新颖框架,这对于灵巧机器人操作至关重要。该两阶段系统使用流匹配来创建手部姿势、物体姿势和接触状态的时间连贯序列,并以视觉输入和语言指令为条件。FlowHOI将以几何为中心的手部抓取与以语义为中心的操作分离开来,利用3D场景标记和运动-文本对齐损失进行引导。该框架在GRAB和HOT3D等基准测试中取得了优越的性能,在动作识别准确率和模拟成功率方面取得了显著的提高,同时与现有方法相比还提供了显著的推理速度提升。此外,FlowHOI已成功在真实机器人上针对各种操作任务进行了演示。 AI
影响 该框架能够实现更复杂、更适应现实世界任务的机器人系统。
排序理由 该项目是一篇研究论文,详细介绍了一个新的机器人操作框架。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →