研究人员推出了一项名为BAIT（Bias Annotation In Text）的新资源，旨在检测新闻文章中的认知偏见触发因素。该资源包括一个包含九种偏见触发因素的模式、一个标注员代码簿以及50篇标注过的英文新闻文章。在对六个大型语言模型进行测试时，这些模型在识别文章层面的触发因素存在性方面表现与人类相当，但在精确定位包含这些偏见的具体段落时却遇到了显著困难。这些模型还倾向于基于表面线索过度预测触发因素，表明它们依赖于表面特征而非对操纵机制的深入理解。 AI
影响 该基准测试突显了当前大型语言模型在理解细微的语言操纵方面的局限性，表明需要改进AI新闻摘要和分析工具中的偏见检测能力。
排序理由 该集群描述了一篇介绍用于评估大型语言模型在新闻文章中检测认知偏见能力的新基准测试的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
