研究人员推出了一种“校准反射”(Calibrated Reflection)方法,以改进大型语言模型(LLM)对其输出置信度的估计。该方法结合了结构化推理和一种距离感知校准技术。关键创新包括用于评估所有可能标签的最大置信度选择(MCS)方法、一种基于反射的提示机制以提高推理的可靠性,以及一种考虑标签之间序数关系的校准技术。该方法在HelpSteer2和Llama T-REx等各种数据集上,对对话式和基于事实的分类任务都显示出了有效性。 AI
影响 提高了LLM输出的可靠性,从而能够更好地决定何时信任模型的响应,何时寻求人工干预。
排序理由 该集群包含一篇详细介绍LLM新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Calibrated Reflection
- HelpSteer2
- Large Language Models
- Llama T-REx
- Maximum Confidence Selection
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →