实体 SourceClash

SourceClash

PulseAugur coverage of SourceClash — every cluster mentioning SourceClash across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_320717 · Oct 19 · 05:43

新的基准 SourceClash 揭示语言模型的“程序性幻觉”

研究人员发现了一种称为“程序性幻觉”的语言模型现象，即模型生成的答案虽然有检索到的上下文支持，但却与其自身的技能或程序相冲突。为了研究这一点，他们创建了一个名为 SourceClash 的基准，包含 1,271 个捆绑包和 10 个程序域中的 6,355 个提示。在九个测试模型中，当检索上下文与技能冲突时，有效答案的比率显著下降至平均 25.7%，而当上下文支持时，该比率则超过 70%。分析表明，针对模型内特定价值路径的干预措施可以提…