新AI框架为语音生成风格化和语义手势

研究人员推出了一种新颖的框架SiGnature，用于生成与语音同步的风格化和语义手势。该系统在显式的联合旋转空间中运行，允许将外部运动序列，特别是语义手势，直接集成到扩散过程中，而无需重新训练。该框架的联合运动集成（JMI）机制识别语义动作的活动关节，而扩散骨干则处理姿势和流畅度，保留说话者的独特风格。 AI

影响 通过改善手势的同步性和语义含义，使AI生成的角色更加自然和富有表现力。

排序理由 该集群包含一篇在arXiv上发表的研究论文，详细介绍了一种用于手势生成的新AI框架。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

• alphaXiv
• arXiv
• CatalyzeX Code Finder for Papers
• Connected Papers
• DagsHub
• Gotit.pub
• Hugging Face
• Joint Motion Integration
• Litmaps
• ScienceCast
• scite Smart Citations
• SiGnature

• 论文
• 模型发布

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →