VeyraBench

新研究详细介绍了提示设计如何影响 LLM 的指令遵循和幻觉

一篇新的研究论文探讨了提示设计选择如何影响大型语言模型（LLM）的性能，特别关注指令遵循和幻觉。实验表明，指令数量的增加会显著降低模型的依从性，在指令达到 80 条时，完美响应率降至零。上下文长度也起着至关重要的作用，在 128k token 之前，召回准确率保持较高水平，之后急剧下降，模型越来越倾向于拒绝回答，而不是捏造信息或表现出谄媚。