LibriSpeech-Real-QA

新基准测试评估大型语言模型实时语音交互能力

研究人员推出了 LibriSpeech-Real-QA，这是一个旨在评估语音大型语言模型（SLM）在实时流式场景下表现的新基准测试。目前的 SLM 通常离线处理音频，等待完整片段后再响应，这不适用于需要持续交互的应用。该数据集构建自 LibriSpeech，旨在评估 SLM 在流式音频块中识别目标词的能力。对商业模型的初步评估表明，它们倾向于在语音轮次结束后才做出响应，这凸显了该领域进一步研究和开发的必要性。