PulseAugur
实时 09:25:18
English(EN) SubtleTalk: Generating Controllable Weakly-correlated Facial Dynamics for 3D Talking Heads via Residual Flow Matching

新框架通过可控的面部动力学增强3D说话人脸的真实感

研究人员开发了SubtleTalk,一个旨在为3D说话人脸动画生成更自然、更可控的面部动力学的新框架。该系统解决了当前方法中眉毛运动、眨眼和头部运动建模的局限性,这些运动通常显得僵硬或重复。SubtleTalk纳入了用于韵律、强度和情感信号的显式控制,使用残差流匹配来捕捉多样的运动模式,并引入了具有广泛身份和标注数据的SubtleTalk-Face数据集,以提高真实感和多样性。 AI

影响 这项研究可能带来更逼真的虚拟形象,并提高AI生成视频内容的真实感。

排序理由 这是一篇详细介绍用于3D面部动画的新框架和数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架通过可控的面部动力学增强3D说话人脸的真实感

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Chenyang Ding, Shuai Tan, Qunfen Lin, Xinwei Jiang, Zijiao Zeng, Ye Pan ·

    SubtleTalk:通过残差流匹配为3D说话人脸生成可控的弱相关面部动态

    arXiv:2608.06408v1 Announce Type: cross Abstract: Audio-driven 3D facial animation aims to synthesize realistic and temporally coherent motions from speech. Despite notable progress in lip synchronization, weakly correlated dynamics, including eyebrow movements, eye blinks, and h…