研究人员开发了JEPA4R,一种利用4D点规划进行机器人操作的新型JEPA世界模型。该模型在单深度相机点云的潜在空间中进行预测和规划,在200步内实现了1.1厘米的平均点误差,准确率令人印象深刻。JEPA4R在OGBench和CortexBench等多个基准测试中优于以前基于像素的JEPA模型,并在MetaWorld和Adroit Relocate上获得最高排名。值得注意的是,该模型仅在数字孪生环境中进行训练,就能以零样本执行能力成功地将其能力转移到真实的机械臂上。 AI
影响 这项研究通过在潜在空间中改进规划,实现了零样本仿真到现实的转移,从而提升了机器人操作能力。
排序理由 发布了一篇详细介绍新型AI模型及其在基准测试中性能的新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →