EMPIRE-651K

新的EMPIRE框架通过显式操作规划推进手部运动预测

研究人员推出了一种新颖的两阶段框架EMPIRE，旨在改进以自我为中心的手部运动预测。该方法首先从多模态上下文中学习显式操作规划，以理解手部与物体的交互，然后使用运动生成器基于这些固定的规划合成未来的手部运动。这种方法避免了操作学习与运动合成之间的干扰。EMPIRE还包含了EMPIRE-651K，这是一个拥有超过65万个训练窗口和111个任务的新数据集，并在手部运动预测方面展示了最先进的准确性。