Human motion forecasting

新的门控情感Transformer改进了人类运动预测

研究人员开发了一种名为门控情感Transformer（GAT）的新方法，通过将面部情感线索与身体姿势数据相结合来改进人类运动预测。研究发现，简单地组合这些模态会降低准确性，但GAT的门控机制可以动态调节信息流，抑制噪声同时利用相关的情感信号。研究表明，面部情感主要在短到中期时间窗口内提供预测线索，表明它是一种补充线索，而不是未来运动的主要驱动因素。