研究人员开发了EgoControl,这是一种新颖的视频扩散模型,旨在生成具有精确身体运动控制的自视角视频。该模型在自视角数据上进行训练,并通过明确的3D身体姿态序列来条件化未来帧的生成。EgoControl引入了一种新的姿态表示,该表示同时考虑了全局相机动力学和关节身体运动,并将这种控制机制整合到扩散过程中,以生成与目标姿态一致的、时间连贯且视觉逼真的自视角视频。 AI
影响 为具身AI代理提供更逼真的模拟和规划能力。
排序理由 该集群描述了一篇详细介绍新颖视频生成模型的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- 3D Full-Body Poses
- arXiv
- DagsHub
- EgoControl
- Embodied Ai
- Enrico Pallotta
- Hugging Face
- Video Diffusion Model
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →