研究人员开发了 ProxyPose,一种从单目视频跟踪物体和表面六自由度 (6-DoF) 位姿的新颖方法。该方法将问题重新定义为视频到视频翻译任务,利用微调的视频扩散模型生成合成代理视频。通过分析此代理视频中已知物体的运动,ProxyPose 可以准确恢复原始表面的 6-DoF 轨迹。该技术无需 3D 模型或深度图等额外输入,展示了最先进的性能,并可扩展到面部跟踪和相机位姿估计等应用。 AI
影响 这项研究可以通过实现更强大且与输入无关的物体和表面位姿跟踪来推动计算机视觉应用。
排序理由 该集群描述了一篇发表在 arXiv 上的新研究论文,其中详细介绍了一种新颖的位姿跟踪方法。
- arXiv
- computer vision
- pose estimation
- ProxyPose
- six degrees of freedom
- Video Diffusion Model
- video-to-video translation
- Camera Pose Estimation
- colored polyhedron
- depth map
- Face tracking method and device
- object masks
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →