PulseAugur
中
实时 01:27:18

新框架模拟可见发音动力学，实现逼真的3D面部动画

作者 PulseAugur 编辑部 · [1 个来源] ·

研究人员开发了一个新的框架，用于从语音生成逼真的3D面部动画，重点关注可见的发音动力学。该系统名为Speech--Articulatory Memory (SAM) 和 Topology-aware Articulatory Composition (TAC)，通过诸如张开、闭合和突出等方向性发音运动来模拟语音。在VOCASET和TFHP等数据集上的实验证明了在重建指标上的最先进性能，并提高了唇部发音的准确性，用户研究证实了唇部同步和逼真度的提高。 AI

影响 这项研究可能通过增强的面部动画，带来更逼真的虚拟化身和改善人机交互。

排序理由 该集群包含一篇研究论文，详细介绍了用于语音驱动的3D面部动画的新颖框架。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架模拟可见发音动力学，实现逼真的3D面部动画

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Hyung Kyu Kim, Byungchan Hwang, Hak Gu Kim ·

    Seeing Speech: 学习可见的发音动力学以实现语音驱动的3D面部动画

    arXiv:2609.30517v1 Announce Type: cross Abstract: Recent progress in speech-driven 3D facial animation has improved vertex-level reconstruction quality, but speech-consistent visible articulation remains difficult. This is because speech production follows structured and constrai…

相关实体

相关话题