实体
Sara Papi
Sara Papi
PulseAugur coverage of Sara Papi — every cluster mentioning Sara Papi across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
新的MCIF基准测试了多模态和跨语言LLM的指令遵循能力
研究人员推出了MCIF，这是一个旨在评估大型语言模型多模态和跨语言指令遵循能力的新基准测试。该基准测试的独特性在于其使用科学讲座作为源材料，并全面覆盖了多种语言、模态（语音、视觉、文本）以及包括识别、翻译、问答和摘要在内的任务类型。使用MCIF对23个模型的初步分析揭示了普遍存在的挑战，并突出了多模态LLM未来发展的方向。
-
SpeechLLMs在翻译基准测试中表现参差不齐，级联系统仍占主导地位
一项新的综合测试套件“Hearing to Translate”已被开发出来，用于评估将语音模态直接集成到大型语言模型（LLMs）中进行语音到文本翻译的有效性。该研究将六个最先进的SpeechLLMs与十六个级联系统进行了基准测试，分析了在16个基准、13种语言对和9种挑战性条件下的性能。研究结果表明，虽然级联系统总体上仍然最可靠，但最近的SpeechLLMs在特定场景下可以与之匹敌甚至超越它们，而独立的Speech Foundati…