Span-Grounded Deontic Trees

AI模型难以处理法律例外，新基准揭示

研究人员推出了NormBench，这是一个旨在评估AI模型理解和解析法律及政策文件能力的新基准。该基准特别关注识别嵌套例外和反例外。基准使用基于跨度的义务树（SG-DT）来表示规则及其例外，从而实现更精确的范围解析。对当前大型语言模型的评估揭示了“递归衰减”和“可审计性陷阱”等问题，表明在处理复杂的规则结构和例外方面存在困难，尽管SG-DT在提高这些特定挑战上的表现方面显示出潜力。