一篇新发表在arXiv上的论文,在英国就业法庭的背景下,调查了法律判决预测(LJP)模型中的捷径学习。研究人员发现,当前基于事后司法材料训练的LJP模型,并非通过真正的预测,而是通过利用揭示结果的语言线索来获得高预测性能。研究表明,一个仅在已识别的4%泄露特征上训练的模型就能超越人类专家,这凸显了LJP系统中预测性能指标被夸大的担忧。然而,该论文提出,这种漏洞并非不可克服,因为即使在移除这些揭示结果的伪影后,模型仍然保留了预测能力。 AI
影响 由于语言捷径,凸显了在法律环境中AI性能被高估的可能性,并敦促采用更稳健的审计方法。
排序理由 学术论文,详细介绍了AI模型行为的实证研究结果。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →