RNN-Transducer

新的TTS模型实现更低延迟和改进的语音-文本对齐 · 跟踪4个来源

研究人员开发了改进文本到语音（TTS）系统的新方法，重点在于实现更低的延迟以及更好的文本与语音之间的对齐。CTC-TTS 利用基于CTC的对齐器和双词交错策略，在流式合成方面优于传统方法。StreamAlign 通过结合字符级RNN-Transducer 对齐和词级ASR引导，实现了实时流式分词，显著降低了延迟。TontaubeV1 采用分层编解码器建模方法和有界上下文，分离语义和声学流，在实现高效的消费者GPU流式推理的同时，保持了自然的韵律。