研究人员推出 TUSI-Bench,这是一个旨在评估波斯语法律背景下检索增强生成 (RAG) 系统的全新基准测试。该基准测试通过提供真实的 grounding 和法律推理的覆盖范围,解决了现有资源的局限性。TUSI-Bench 构建在一个全面的法律知识框架之上,并包含一个知识图谱以促进结构化检索。它包含两项评估任务:TUSI-QA 用于需要引文的开放式问题,TUSI-Bar 用于源自伊朗律师考试的多项选择题。一个基于图的检索基线显示了召回率的提高,突显了结构化法律数据对 RAG 系统的价值。 AI
影响 该基准测试可以提高 AI 系统在法律应用中的准确性和可靠性,尤其是在非英语环境中。
排序理由 该条目描述了一个用于评估 AI 系统的新学术基准测试,发布在 arXiv 上。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX Code Finder for Papers
- Connected Papers
- DagsHub
- Gotit.pub
- Hugging Face
- Iranian Bar
- Litmaps
- Persian
- ScienceCast
- scite Smart Citations
- Supreme Court of the United States
- TUSI-Bar
- TUSI-Bench
- TUSI-QA
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →