JointHOI

新的扩散模型生成逼真的3D手部物体交互

研究人员开发了JointHOI，一个新颖的单阶段扩散框架，旨在根据文本提示生成逼真的3D手部物体交互。该方法联合生成手部和物体运动以及动态接触图，使模型能够在训练期间学习接触与运动之间的耦合。通过在推理过程中使用接触引导采样，JointHOI强制执行生成的接触图与运动的隐含几何形状之间的一致性，从而提高了时间稳定性和减少了穿透和漂浮等伪影。在GRAB和ARCTIC数据集上的实验表明，JointHOI在文本依从性和物理合理性方面均优于先前的方法。