WorldPose

新方法通过联合建模轨迹和3D姿态来预测人类运动

研究人员开发了一种新的方法，通过联合建模智能体的全局轨迹和3D身体姿态来预测体育运动中的人类运动。该方法利用了一个社会-时间编码器，该编码器在输入层面融合了轨迹和姿态信息，并通过共享的因子化注意力进行处理。该模型包含了一个每关节损失重加权方案，以强调动态关节，以及一个频域轨迹平滑项，以提高预测精度。研究人员还通过采用非重叠协议和多未来预测的确定性策略来解决评估偏差，并在WorldPose和3DPW数据集上取得了改进的结果，尤其是在姿态准确性方面。