一项新研究表明,大型语言模型(LLMs)尽管能够引用相关法规或先例,但常常未能展示真实的法律推理能力。研究人员发现,当被要求通过引用法律权威来证明判决时,LLMs 总是能正确引用。然而,当将引用的权威替换为不相关的条文时,模型的判决会不一致地改变,这表明模型并未真正依赖所引用的法律进行因果推理。这种漏洞在各种模型和基准测试中均有发现,表明当前 LLM 生成的法律解释可能不是忠实法律推理的可靠指标。 AI
影响 LLM 生成的法律解释可能不可靠,影响其在合规和审计中的应用。
排序理由 该集群包含一篇详细介绍 LLM 能力研究结果的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- Cited but Not Consulted: A Counterfactual Audit of Legal Chain-of-Thought Faithfulness
- ContractNLI
- Hugging Face Daily Papers
- large-language models
- LoRA+
- SCOTUS
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →