SubtleTalk-Face

新框架通过可控的面部动力学增强3D说话人脸的真实感

研究人员开发了SubtleTalk，一个旨在为3D说话人脸动画生成更自然、更可控的面部动力学的新框架。该系统解决了当前方法中眉毛运动、眨眼和头部运动建模的局限性，这些运动通常显得僵硬或重复。SubtleTalk纳入了用于韵律、强度和情感信号的显式控制，使用残差流匹配来捕捉多样的运动模式，并引入了具有广泛身份和标注数据的SubtleTalk-Face数据集，以提高真实感和多样性。