PulseAugur
实时 10:28:25
English(EN) Instruct-FD: Can Your Full-Duplex Speech System Follow Turn-Taking Instructions?

新基准 Instruct-FD 揭示语音系统在遵循轮流对话指令方面存在困难

研究人员推出 Instruct-FD,这是一个旨在评估全双工语音系统遵循轮流对话指令能力的新基准。这对于需要适应对话策略的现实世界应用至关重要。该基准利用合成流水线生成指令条件对话,并使用基于 LLM 的裁判进行评估。对六个最先进系统的初步测试显示,指令遵循能力存在显著差距,最佳模型的依从性仅为 64.4%,尤其在诸如回应和打断等主动行为方面存在困难。 AI

影响 凸显了当前全双工语音系统的一个关键差距,表明在实际部署中需要提高适应性和指令遵循能力。

排序理由 该项目是一篇研究论文,介绍了一个新的基准和评估协议,用于 AI 系统。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新基准 Instruct-FD 揭示语音系统在遵循轮流对话指令方面存在困难

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Yuzhi Tang, Wentao Ma, Xiling Zhao, Ahmad Salimi, Sepehr Harfi Moridani, Dongming Shen, Jixuan Wang, Abdulrahman Abdulrazzag, Murdock Aubry, Yu-Hua Chen, Daniel Lee, Jaewon Lee, Jonah Mackey, Silin Meng, Nicholas Stranges, Chenxu Xiong, Hao Yu, Yi Zhu, M… ·

    Instruct-FD:您的全双工语音系统能遵循轮流指令吗?

    arXiv:2607.20460v1 Announce Type: cross Abstract: Current full-duplex (FD) spoken dialogue systems can produce fluid interactions, yet it remains unclear whether they can adapt their turn-taking behavior when explicitly instructed. This is critical for real-world deployment, wher…