研究人员开发了一种名为跨模态接口修复仿射场(AFFIRM)的新方法,以解决文本更新后语音语言模型访问知识的挑战。该技术旨在修复仅语音访问,而不改变原始的承载知识的检查点。AFFIRM首先冻结语音隐藏状态的基础校正,然后应用查询特定的调整。在合成语音数据上的初步测试表明,AFFIRM的表现与其他方法(如SALSA和ReFT)相当,但在真实世界录制的问答中,完全拟合的AFFIRM算子显著提高了ROUGE-L分数,证明了其在弥合文本获取和语音访问之间差距方面的有效性。 AI
影响 这项研究可以通过确保通过语音查询持续访问知识更新来提高支持语音的AI系统的可用性。
排序理由 该集群包含一篇详细介绍语言模型语音访问修复新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Affine Fields for Interface Repair across Modalities
- AFFIRM
- arXiv
- Hugging Face
- PopQA
- ReFT
- SALSA
- SLUE-SQA-5
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →