LLM-jury simulation

大型语言模型陪审员根据被告陈述和背景表现出偏见

一项名为 JuryBench 的新基准已被开发出来，用于研究在美国刑事法律案件中，大型语言模型模拟的陪审员如何受到被告陈述的影响。该研究分析了来自 20 个前沿大型语言模型的超过 432,000 个判决，发现情感说服会对感知到的罪责产生负面影响，并且被告与陪审员之间的背景亲和力是量刑的重要因素。意识形态在塑造严重性判断方面也起着重要作用，这既揭示了使用大型语言模型模拟陪审员推理的潜力，也揭示了其风险。