研究人员推出 Instruct-FD,这是一个旨在评估全双工语音系统遵循轮流对话指令能力的新基准。这对于需要适应对话策略的现实世界应用至关重要。该基准利用合成流水线生成指令条件对话,并使用基于 LLM 的裁判进行评估。对六个最先进系统的初步测试显示,指令遵循能力存在显著差距,最佳模型的依从性仅为 64.4%,尤其在诸如回应和打断等主动行为方面存在困难。 AI
影响 凸显了当前全双工语音系统的一个关键差距,表明在实际部署中需要提高适应性和指令遵循能力。
排序理由 该项目是一篇研究论文,介绍了一个新的基准和评估协议,用于 AI 系统。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- Connected Papers
- CORE Recommender
- DagsHub
- Gotit.pub
- Hugging Face
- Influence Flower
- Instruct-FD
- Litmaps
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →