PamiRefiner

新PAMI框架从文本生成人与物交互

研究人员开发了PAMI，一个用于从文本生成人与物交互的新颖框架。该方法采用部分锚定运动方法，其中身体部位锚点“投票”决定物体运动，灵感来源于霍夫变换。PAMI使用PamiVAE学习交互潜在空间，并以粗到精的层次结构生成交互，其中PamiGen创建初始交互，PamiRefiner解决细粒度的接触几何。在InterAct数据集上的实验表明，PAMI在生成忠实交互和准确的人与物相对运动方面表现优越，接触召回率比现有最先进方法高出14.5%。