一项名为LexPilot的新基准测试已被开发出来,用于评估法律大语言模型(LLMs)在与普通用户就中国民事案件进行咨询时的主动交互能力。研究人员发现,当前的大语言模型在面对信息不明确的查询时,常常提供无益的回答,未能引导用户提供必要的细节。LexPilot由432份真实中国民事判决书构建而成,将主动交互与索赔级别判决预测联系起来,揭示了在缺乏足够案件背景信息的情况下,大语言模型的性能会显著下降。 AI
影响 强调了需要更以用户为中心的法律人工智能,以改善普通用户的咨询体验和下游案件预测。
排序理由 该集群包含一篇介绍用于评估大语言模型能力的新的基准测试的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →