English(EN) Where Does the Noise Come From? A Variance-Components Decomposition of Non-Determinism in LLM Brand Answers

LLM品牌答案高度可变，语言是关键驱动因素

作者 PulseAugur 编辑部 · [1 个来源] · 2026-07-14 22:12

一篇新的研究论文分析了大型语言模型（LLM）在品牌推荐方面响应不确定性的来源。研究发现，查询语言是响应方差的最大贡献者，占总数的26.5%，而品牌身份的贡献仅为1.5%。研究表明，为了提高可靠性，通过语言和模型进行多样化比简单地重复提示更有效。 AI

影响强调了语言对LLM响应一致性的重大影响，暗示了对多语言评估策略的需求。

排序理由分析LLM行为并提出一种方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

报道来源 [1]

arXiv cs.CL TIER_1 English(EN) · Dmitrij Żatuchin · 2026-07-14 22:12

噪音来自何处？LLM品牌答案中非确定性的方差分量分解

Teams measuring whether large language models (LLMs) recommend a brand face a reproducibility problem: ask the same question twice and the answer moves. Practice resamples each prompt a few times (commonly five) and averages, treating within-prompt resampling as the source of the…