PulseAugur
实时 21:56:53
English(EN) Reinforcement Learning with Metacognitive Feedback Elicits Faithful Uncertainty Expression in LLMs

新的强化学习方法增强了大型语言模型的不确定性表达和可信度

研究人员开发了一种名为“基于元认知反馈的强化学习”(RLMF)的新方法,以改进大型语言模型(LLMs)表达其不确定性的方式。该方法利用模型对其性能的自我评估来优化其响应并识别有价值的训练数据,其表现优于标准的活动学习技术。实验表明,RLMF显著增强了“忠实校准”,使表达的不确定性与内在置信度保持一致,并提高了LLMs识别和传达其知识边界的能力。 AI

影响 这项研究可能通过提高大型语言模型表达不确定性和避免自信性幻觉的能力,从而带来更可靠、更值得信赖的大型语言模型。

排序理由 该集群描述了一篇详细介绍改进大型语言模型能力的新方法的最新研究论文。

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 3 个来源。 我们如何撰写摘要 →

新的强化学习方法增强了大型语言模型的不确定性表达和可信度

报道来源 [3]

  1. arXiv cs.AI TIER_1 English(EN) · Gabrielle Kaili-May Liu, Avi Caciularu, Gal Yona, Idan Szpektor, Arman Cohan ·

    元认知反馈的强化学习能够引发大型语言模型中忠实的 不确定性表达

    arXiv:2606.32032v1 Announce Type: cross Abstract: Metacognition is a critical component of intelligence that describes the ability to monitor and regulate one's own cognitive processes. Yet LLMs exhibit systemic deficiencies in key metacognitive faculties: they hallucinate with h…

  2. arXiv cs.AI TIER_1 English(EN) · Arman Cohan ·

    具身智能体通过元认知反馈学习,在大型语言模型中引发忠实的 不确定性表达

    Metacognition is a critical component of intelligence that describes the ability to monitor and regulate one's own cognitive processes. Yet LLMs exhibit systemic deficiencies in key metacognitive faculties: they hallucinate with high confidence, fail to recognize knowledge bounda…

  3. Hugging Face Daily Papers TIER_1 English(EN) ·

    基于元认知反馈的强化学习促使大型语言模型表达真实的置信度

    Reinforcement learning with metacognitive feedback and metacognitive data selection improve large language model calibration by enabling accurate self-assessment of performance and uncertainty.