研究人员发现了一种大型语言模型中的新现象,称为“锚定虚构”(anchored confabulation),其中提供部分证据会适得其反地增加模型自信地产生幻觉的倾向。这种效应被正式表述为参数幻觉置信度(Parametric Hallucination Confidence, PHC),在多个模型家族中均有观察到,并由一项新定律——锚定阈值定律(Anchoring Threshold Law)进行预测。研究结果对检索增强生成(RAG)系统具有启示意义,提出的 LearnedRouter 通过利用 PHC 显著提高了性能。 AI
影响 识别出一种新的 LLM 故障模式,可用于改进 RAG 系统并减少幻觉。
排序理由 学术论文,详细介绍了新颖的 LLM 行为及其影响。
- Anchoring Threshold Law
- arXiv
- Ashish Balkishan Lathkar
- Hugging Face
- LearnedRouter
- Parametric Hallucination Confidence
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →