研究人员推出MoSE3,这是一种新颖的前馈模型,能够从单目RGB视频中预测密集的SE(3)运动。该模型在世界空间中的每个像素生成完整的6-DoF刚体变换,从而提供对场景运动更全面的理解,包括旋转、平移和物体分组。MoSE3通过学习3D点轨迹和刚度嵌入的中间表示来解决直接SE(3)预测的挑战,从而实现端到端训练和监督。为此,创建了一个名为Art-Kubric的新合成数据集,其中包含关节物体的密集SE(3)和刚度标签。 AI
影响 推动了密集3D运动预测的进步,可能改进机器人和增强现实应用。
排序理由 该集群描述了一篇关于计算机视觉新模型(MoSE3)和数据集(Art-Kubric)的新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- Art-Kubric
- arXiv
- CatalyzeX
- DagsHub
- Hugging Face
- MoSE3
- SE(3)-Transformers: 3D Roto-Translation Equivariant Attention Networks
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →