研究人员推出EgoXperience,一个新颖的框架,旨在通过联合建模相机运动、场景几何、手部和物体来重建自我中心视频。该系统利用一个名为EgoX-Engine的自动标注引擎,它将物体跟踪与基于SLAM的世界对齐相结合,以生成一致的监督。该框架包括EgoX-Data-6M,一个50小时的数据集,以及用于评估的EgoX-Bench,EgoX模型在度量重建和手部-物体姿态恢复方面展示了最先进的性能。 AI
影响 这项研究推动了自我中心视频理解的发展,有望改进机器人、增强现实和人机交互等领域的应用。
排序理由 该集群描述了一篇关于新研究论文的细节,该论文详细介绍了一个用于自我中心视频重建的新颖框架和模型。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →