研究人员开发了一种新的黑盒因果审计方法,用于调查大型音频语言模型 (LALM) 中的幻觉。该方法隔离音频内的证据区域,以了解模型如何为其声明打下基础。研究发现,像音频感知解码 (AAD) 这样的缓解技术的有效性在 Qwen2-Audio-7B 和 Audio Flamingo 3 等模型之间存在显著差异,这表明存在不同的基础机制。所提出的方法与对比解码相结合,将 Qwen2-Audio-7B 的准确率从 57.1% 提高到 71.9%。 AI
影响 这项研究强调了对音频基础技术进行模型特定调整的必要性,这有可能提高 LALM 的可靠性。
排序理由 该集群包含一篇学术论文,详细介绍了关于大型音频语言模型的新研究方法和发现。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →