Qwen3-TTS
PulseAugur coverage of Qwen3-TTS — every cluster mentioning Qwen3-TTS across labs, papers, and developer communities, ranked by signal.
4 天有情绪数据
-
新的SCIC方法通过子句级韵律控制增强了表达式TTS
研究人员开发了一种名为SCIC（范围和码本感知指令条件化）的新方法，以增强表达式文本到语音（TTS）功能，特别是针对直播等长篇内容。该方法通过允许指令针对相对于前一句的特定子句，从而实现对音高和能量等韵律的更精确控制。SCIC分析了Qwen3-TTS等模型中码本的结构，以优化指令条件化，与标准的指令微调相比，在合成语音中实现了更高的控制精度和更清晰的层级表达。
-
Google 的 Gemini 应用提供免费每日简报；Nari Labs 发布新的语音模型
Google 已将其 Gemini 应用的每日简报功能免费提供给美国用户，该服务最初于 2026 年 I/O 大会宣布。此外，Nari Labs 发布了 Qwen3-TTS 和 Qwen3-ASR，这是专为高精度、低延迟和成本效益而设计的开源语音模型。
-
Nari Labs 以 Qwen3 模型引领语音 AI 基准测试
Nari Labs 在 Coval 语音 AI 基准测试中，其 Qwen3-TTS 和 Qwen3-ASR 模型均取得了最高排名。该公司模型在文本转语音的时间到首个音频（TTFA）和词错误率（WER）等指标上表现出色，在语音转文本方面则在时间到最终片段（TTFS）和词错误率（WER）方面表现突出。与 AssemblyAI 和 ElevenLabs 等竞争对手相比，Nari Labs 还强调了其产品的成本效益。
-
新的X2-NativeCursor系统改进了文本到语音的进度跟踪
研究人员开发了X2-NativeCursor，一种用于增量文本到语音（TTS）应用程序中跟踪文本进度的创新系统。这个轻量级观察器通过在波形解码前分析原生语音Token来运行，从而实现更精确的同步，用于高亮显示和中断处理等功能。与现有的基于波形的方法相比，该系统在跟踪误差和实时性能方面均有显著改善，并在Qwen3-TTS和CosyVoice2等模型上得到了验证。
-
新框架赋能文本到语音系统多情感控制
研究人员开发了HybridEmo，一个用于训练文本到语音（TTS）系统的新框架，该系统能够处理单个语句中的多种情感。该框架通过采用具有样本感知混合奖励的组相对策略优化，解决了当前多情感TTS的局限性。HybridEmo在控制情感轨迹和融合情感方面表现出显著的改进，在人类评估中优于CosyVoice 3和EmoVoice-0.5B等现有模型。
-
新的开源桌面语音助手在本地运行以保护隐私
一款名为“桌面语音助手”的新型开源桌面语音助手已发布，旨在完全在 Windows、Linux 和 macOS 本地运行。它使用 Whisper 进行唤醒词检测和语音转文本，使用本地语言模型进行处理，并使用 Qwen3-TTS 进行语音合成，确保完全的隐私且无云成本。该项目是用 Python 构建的，并包含必要的组件，用户无需额外安装。
-
使用 Ollama 和 Qwen 模型构建的本地实时语音栈
一位用户使用 Ollama 开发了一个本地、实时的语音处理系统。该设置集成了 Parakeet STT 进行语音到文本转换，然后使用 Qwen 2.5 7B 模型进行语言理解，最后以 Qwen3-TTS 进行文本到语音输出。此配置允许完全离线的语音交互体验。
-
Qwen3-TTS 语音克隆已集成到 mainline llama.cpp
llama.cpp 项目已将 Qwen3-TTS 语音克隆功能集成到其 mainline 中，支持本地语音生成。此新实现支持多种语言，并能从简短的音频参考中克隆声音。虽然基础模型现已可用，但 CustomVoice 和 VoiceDesign 等高级功能尚不支持，并且需要与现有实现进行进一步比较以评估性能和相似性。
-
llama.cpp 发布多个更新，改进性能和构建
llama.cpp 项目发布了多个更新，包括 b10567 版本，该版本为 macOS、Linux、Android 和 Windows 提供了 CI 改进和各种构建选项。之前的版本如 b10566 和 b10549 分别引入了版本升级和张量分割功能。其他更新解决了 b10539 中的 Vulkan 量化计算、b10545 和 b10538 中的 Metal 性能优化以及 b10536 中的服务器端模型加载等具体问题。b10537 版本…
-
audio.cpp 0.4 增加 TTS/ASR 模型，支持完整 GGUF
audio.cpp 项目已发布 0.4 版本，引入了对多种新的高质量文本转语音 (TTS) 和自动语音识别 (ASR) 模型支持，包括 Higgs Audio v3 TTS 4B 和 Fish Audio S2 Pro。此版本还全面集成了 GGUF 格式支持所有模型家族，提供了显著的速度和 VRAM 提升，尤其是在 Q8 量化方面。该项目现支持 35 个模型家族，并新增了社区模型区域以支持更成熟的移植。
-
r/LocalLLaMA 用户寻求 ASR 和 TTS 模型推荐
r/LocalLLaMA 上的这篇 Reddit 帖子在征求自动语音识别 (ASR) 和文本转语音 (TTS) 模型推荐。原帖作者目前正在使用 Whisper 和 Kokoro 等旧模型配合 koboldcpp，并正在寻找更新、可能更好的替代品。他们提到了 Qwen3-ASR 和 Qwen3-TTS，但尚未测试过，并希望从社区那里获得关于他们当前 ASR 和 TTS 模型使用情况的意见。
-
AI集成项目展示Wan2GP LTX2.3、Flux2和Qwen3-TTS
一位Reddit用户分享了一个结合了包括Wan2GP LTX2.3、Flux2和Qwen3-TTS在内的多个AI模型的项目。该项目似乎是一个演示或创意作品，标题引用了动画系列《瑞克和莫蒂》中的角色Morty Smith。该帖子包含一个视觉组成部分，可能是图片或视频，展示了这些AI技术的集成。
-
Wan2GP LTX2.3 和 Qwen3-TTS 演示功能 featuring 马里奥
演示展示了 Wan2GP LTX2.3 结合 Qwen3-TTS 的能力， featuring 马里奥的演绎。这种集成突显了先进的文本转语音和其他人工智能驱动的创意工具的潜力。
-
Wan2GP LTX2.3 在新开源版本中集成了 Flux2 和 Qwen3-TTS
一个名为 Wan2GP LTX2.3 的新开源项目已发布，集成了 Flux2 和 Qwen3-TTS。该项目旨在为用户提供先进的功能，这从其包含的文本转语音和其他生成功能可以看出。该版本以一种俏皮、挑战的语气呈现，暗示着其重点在于突破当前人工智能技术的界限。
-
新的卢森堡语SQA系统使用TTS，发布新的表达式语音语料库
研究人员开发了LuxSQA，一个用于卢森堡语（一种资源匮乏的语言）的口语问答系统。该系统利用文本到语音（TTS）技术生成合成口语问题，扩充了现有的基于文本的QA资源。通过使用多种TTS系统训练参数高效的架构，LuxSQA在卢森堡语测试集上取得了优异的性能，证明了合成数据在资源匮乏的SQA中的有效性。另外，一个名为LuxEmo的新的卢森堡语表达式语音语料库已从广播节目中创建，包含21小时的数据，涵盖四种情绪类别，并使用五种TTS系统进行了基准测试。
-
开发者使用本地 LLM 构建了与游戏无关的 NPC 引擎
一位开发者创建了一个与游戏无关的 NPC 引擎，该引擎利用小型本地语言模型来增强 RPG 体验。该引擎使用 NVIDIA Parakeet 0.6 进行语音转文本，使用 Gemma 4 26B A4B 作为语言模型，并使用 Qwen3-TTS 进行语音输出，从而实现了快速响应。通过仅注入相关的游戏内操作来优化提示，防止模型过载，从而使用了检索增强生成 (RAG)。
-
audio.cpp 框架提供更快的音频模型推理速度
一个名为 audio.cpp 的新 C++ 推理框架已被开发出来，它构建在 ggml 之上，用于运行包括 TTS、ASR 和语音转换在内的各种音频模型。该框架旨在将多个音频模型整合到单个运行时中，从而无需为每个模型单独配置 Python 环境。初步基准测试显示速度有显著提升，部分 TTS 模型在热启动场景（模型被重复使用）下的运行速度比其 Python 版本快 5 倍。
-
Telegram 机器人支持本地 AI 语音生成和克隆
一个新开发的 Telegram 机器人允许用户直接通过手机使用 AI 模型生成、设计和克隆语音。该机器人利用 FastAPI 和 Qwen3-TTS 模型进行本地推理，支持从预训练角色生成语音、根据文本描述创建新语音以及从短音频样本进行语音克隆等功能。这种方法绕过了对繁重的桌面界面和手动音频文件管理的需求，提供了更便捷高效的用户体验。
-
Anyscale 详解 PyTorch 和 Ray 中的 FSDP，用于训练 Qwen3-TTS
这篇博文详细介绍了 PyTorch 中的完全分片数据并行（FSDP）技术，这是一种在多个 GPU 上高效训练大型 AI 模型的技术。它涵盖了 FSDP 的内部工作原理，演示了如何分片模型参数、梯度和优化器状态以最大限度地减少每个 GPU 的内存使用。文章包括实际示例，例如使用 PyTorch 和 Ray Train 训练 Vision Transformer 和微调 Qwen3-TTS 语音克隆模型。
-
新的TTS方法将情感控制准确率提高了12%
研究人员开发了一种名为跨模态一致性引导无分类器引导（CCG-CFG）的新方法，以改进自回归文本到语音（TTS）模型中的情感控制。该技术根据文本情感和期望语音情感之间的冲突动态调整引导尺度，从而增强情感一致性。当应用于CosyVoice2模型时，这种方法在情感识别准确率和主观质量得分方面取得了显著改进，优于HierSpeech++和Qwen3-TTS等现有方法。