Chinese civil case

新的LexPilot基准测试显示法律大语言模型在主动用户交互方面存在困难

一项名为LexPilot的新基准测试已被开发出来，用于评估法律大语言模型（LLMs）在与普通用户就中国民事案件进行咨询时的主动交互能力。研究人员发现，当前的大语言模型在面对信息不明确的查询时，常常提供无益的回答，未能引导用户提供必要的细节。LexPilot由432份真实中国民事判决书构建而成，将主动交互与索赔级别判决预测联系起来，揭示了在缺乏足够案件背景信息的情况下，大语言模型的性能会显著下降。