一篇题为“字面锁定：测试语言如何改变类型化决策模型对孟加拉语习语的字面吸引力”的新研究论文探讨了决策模型的行为，决策模型是用于路由和分类等任务的非生成式评分器。研究发现，这些模型表现出一种强烈的倾向，即受到测试语言中选项字面意义的影响。具体来说，当模型在孟加拉语习语上进行测试时，与在英语中进行测试相比，它更有可能被选项的字面解释所吸引，即使输入相同。这种“字面锁定”效应会降低校准度，并可能导致不准确的置信度分数，这表明测试语言在模型的性能和可靠性方面起着至关重要的作用。 AI
影响 突出了决策模型中与语言相关的潜在偏见，影响了它们在多语言应用中的可靠性。
排序理由 发布在 arXiv 上的研究论文，详细介绍了有关决策模型的发现。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
