研究人员推出 Walrus,一个拥有 80 亿参数的语音和音频基础模型,能够处理包括语音识别、翻译、文本到语音以及音频理解在内的广泛任务。该模型的有效性归功于数据中心训练方法而非新颖的架构,它使用了从 Gemma 4 初始化、标准的仅解码器骨干网络。Walrus 在超过 20 个任务和 100 种语言的 6 亿多个样本上进行了训练,在多语言、多说话者和代码切换基准测试中表现出色,通常能媲美甚至超越 Qwen3-Omni 等更大的模型。 AI
影响 该模型的数据中心方法可能会影响未来多任务语音和音频模型的开发。
排序理由 该集群包含一份在 arXiv 上发布的关于新型语音和音频基础模型的技术报告。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →