研究人员推出WordVoice,一个旨在增强对基于大型语言模型(LLM)的文本到语音(TTS)系统控制的新型框架。该系统通过实现显式的、多维度的单词级声学操控,解决了当前隐式生成方法的局限性。为此,创建了一个名为WordVoice-5A的实质性双语数据集,其中包含五维的单词级标注。WordVoice框架包含一个用于声学规划的绑定令牌机制和一个用于弥合离散令牌与连续波形之间差距的细粒度调制模块,在保持合成稳定性的同时提供了卓越的控制。 AI
影响 增强了对基于LLM的TTS系统的控制,可能改进有声读物旁白和视频配音等应用。
排序理由 该集群包含一篇详细介绍TTS新框架和数据集的研究论文。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →