研究人员推出了INSPIRE,一个旨在评估指令感知语音检索系统的新型基准。与依赖固定相似度匹配的传统系统不同,INSPIRE允许自然语言指令动态定义相关性标准,涵盖语义内容、说话人身份、说话风格和环境声音。对四种检索范式——大型音频语言模型、级联流水线、自监督语音模型和对比音频语言模型——的初步评估显示,没有一种单一方法能有效处理所有检索意图。基于文本的模型在语义检索方面表现出色,但在语用属性方面遇到困难,而基于语音的模型在声学属性方面表现更好,但在遵循指令方面能力较弱,这表明需要统一的架构。 AI
影响 该基准有望推动更灵活、更具上下文感知能力的语音理解系统的发展。
排序理由 该集群描述了一个新的语音检索学术基准,该基准已在arXiv论文中详细介绍。
在 Hugging Face Daily Papers 阅读 →
- alphaXiv
- arXiv
- CatalyzeX
- CORE Recommender
- DagsHub
- Gotit.pub
- Hugging Face
- Influence Flower
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →