MonoMSK

新框架从单目视频估计3D人体运动和动力学

研究人员开发了MonoMSK，一个用于从单目视频估计3D人体运动和动力学的新颖框架。这种混合方法结合了数据驱动学习和基于物理的模拟，利用了解剖学上精确的肌肉骨骼模型。通过将基于Transformer的逆动力学与可微分正向运动学和基于ODE的模拟相结合，MonoMSK强制执行生物力学因果关系和物理合理性，在运动学精度上优于现有方法，并能够从单摄像头录像中精确估计动力学。