研究人员开发了 AnyTalk，一种为任意角色创建 3D 语音动画的新方法，无需现有的动画数据。该方法通过一种称为特定角色微调（CsF）的过程来调整预训练的视频扩散模型。然后，该方法从合成的说话头视频中估计混合形状参数，以生成唇形同步动画，从而大大减少了手动工作量。还开发了一个名为 AnyTalk_RT 的实时版本，以实现更快的性能。 AI
影响 该方法可以显著降低创建逼真 3D 角色动画的门槛，对游戏开发、虚拟头像和内容创作产生影响。
排序理由 该集群描述了一篇研究论文中提出的新颖方法，详细介绍了一种用于 3D 语音动画的新技术。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
AnyTalk generates 3D speech animations for arbitrary characters without animation data by adapting video diffusion models via character-specific fine-tuning and optimizing blendshape parameters from synthesized talking-head videos, with a distilled real-time variant.
arXiv:2608.16143v1 Announce Type: cross Abstract: We present AnyTalk, a novel method for generating 3D speech animations for arbitrary characters without requiring any animation data. While existing audio-driven 3D speech animation methods rely on character-specific training data…