C2Dex

新的C2Dex框架将人类操作技能从视频迁移到机器人

研究人员开发了C2Dex，一个用于将单目视频中的人类操作演示迁移到灵巧机器人的新颖框架。该系统专注于恢复稳定的物体侧接触作为共享交互表示，确保时间连贯性和物理合理性。该表示指导人类-物体交互的重建以及将这些动作重定向到不同的机器人实体，同时保留局部几何形状。在DexYCB和TACO数据集上的实验表明，与现有方法相比，轨迹成功率有了显著提高，并且真实世界的机器人回放证明了在各种富接触任务中的可行性。