实体
Seamless Interaction corpus
Seamless Interaction corpus
PulseAugur coverage of Seamless Interaction corpus — every cluster mentioning Seamless Interaction corpus across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的StanceBench基准评估音频大语言模型的人际立场检测能力
研究人员推出了StanceBench，一个旨在评估音频大语言模型（LLMs）人际立场检测能力的新基准。该基准利用Seamless Interaction语料库，定义了九个不同的立场维度，并对单说话者和交互式评估进行了标准化。研究还评估了作为自动裁判的大语言模型的鲁棒性、偏见和立场推断准确性，发现同理心和礼貌是最容易检测的立场，而诚实是最具挑战性的。
-
新的SPEARBench评估流式语音到语音模型的自然度
研究人员推出了SPEARBench，这是一个旨在评估流式语音到语音语言模型自然度的新基准。与传统基准不同，SPEARBench侧重于对话方面，如时机、轮流和情感适宜性。该基准使用来自Seamless Interaction语料库的提示，并从多个维度评估模型，包括延迟、中断和方言一致性。初步结果表明，尽管当前模型表现出高信号质量和低错误率，但在几个关键领域仍未达到人类对话行为的水平。