cue sports

新方法通过编码器选择和对比解码增强大型音频语言模型 · 跟踪 2 个来源

研究人员开发了两种新方法来提高大型音频语言模型 (LALM) 的性能。第一种方法 CUES（相关性引导编码器选择）使用轻量级启发式方法，通过估计编码器的互补性（通过性能相关性）来选择最佳编码器，在 XARES-LLM 等基准测试中取得了显著的提升。第二种方法对比解码 (CD) 系统地评估了不同的 CD 策略，确定了音频感知解码和音频对比解码最为有效。该方法主要纠正与音频忽略或不确定性驱动的猜测相关的错误，其收益与模型的基线错误特征密切相关。