实体
DL 208
DL 208
PulseAugur coverage of DL 208 — every cluster mentioning DL 208 across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
研究发现，礼貌的提示会改变大型语言模型的相关性判断
一篇新发表在arXiv上的研究调查了提示中的礼貌用语对用作相关性判断器的大型语言模型的影响。研究人员发现，语气显著影响模型的判断，并且影响因模型而异。当语气影响一致性时，它似乎会转移模型整体评分的宽松度，而不是提高判断的准确性。研究表明，当精确的相关性标签至关重要时，提示语气可能构成有效性威胁。
-
LLMs作为IR评估者显示出对Persona条件化的结构化敏感性
一篇新研究论文探讨了使用Persona条件化来评估大型语言模型（LLMs）在信息检索（IR）评估中作为相关性评估者的敏感性。通过在六个LLM骨干和两个数据集（TREC DL20和RAG24）上实例化五个不同的评估者角色，研究发现LLM的判断表现出结构化敏感性而非均匀变化。虽然高容量模型保持了系统排名的一致性，但较小模型放大了Persona引起的波动，敏感性集中在特定的检索系统上。