Charless C. Fowlkes

新的扩散模型可从第一人称视角估计多人三维身体姿态

研究人员开发了一种新颖的基于扩散的方法，用于从第一人称相机视角估计多个交互个体的三维身体姿态。该方法整合了来自第一人称相机和IMU传感器的数据，并利用VIO SLAM进行相机跟踪。该系统融合了从头部运动推导出的姿态估计以及对他人稀疏、间歇且可靠性可变的外部观察。该模型在运动捕捉和多人视频数据上进行了训练，学习了身体运动和观察可靠性的先验知识，其性能优于仅使用视觉或仅使用运动的方法。