一项新的基准研究揭示,大型语言模型(LLMs)在准确引用法律文件方面存在显著差异,尤其是在处理不同司法管辖区时。虽然Gemini 2.5 Flash、GPT-OSS-120B和Nemotron-3-Super-120B等模型在欧盟的《通用数据保护条例》(GDPR)方面表现良好,但它们经常捏造沙特《个人数据保护法》(PDPL)的引文。这种捏造无论查询语言(阿拉伯语或英语)如何都会发生,并且通常以高度自信的方式呈现,这凸显了在依赖LLMs进行法律合规之前,迫切需要验证保障措施。 AI
影响 突显了LLMs在法律和合规领域部署的关键安全问题,强调了对健全验证机制的需求。
排序理由 该集群包含一篇学术论文,详细介绍了新的基准测试和对LLM能力的评估。
- Arabic
- arXiv
- English
- Gemini 2.5 Flash
- General Data Protection Regulation
- GPT-OSS-120B
- Nemotron-3-Super-120B
- Saudi Personal Data Protection Law
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →