一篇新的研究论文在 Jev 决策模型中发现了一个显著的、依赖算术的拒绝瓶颈。虽然 Jev 在选择正确的数值答案方面表现出高准确率(99%),但在没有有效选项存在时拒绝错误选项的能力却急剧下降至 7%。这种失败在各种数值大小和问题类型中持续存在,即使模型能够正确验证候选答案也是如此。研究人员提出了一种简单的决策阈值,无需重新训练即可应用,该阈值可将拒绝准确率提高到 79%,同时保持高答案存在准确率。 AI
影响 凸显了决策模型中的一个关键缺陷,这可能会影响它们在需要拒绝无效选项的场景中的可靠性。
排序理由 详细介绍决策模型特定故障模式的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →