RubricAtlas

新框架RubricAtlas评估深度研究代理的分析输出

研究人员开发了RubricAtlas，一个旨在评估深度研究代理分析输出的新颖框架。该系统从专家报告中提取类型级分析要求，为评估代理在相关任务中生成的分析的完整性和结构创建了一个共享标准。使用3,079份中文金融研究报告进行的实验表明，RubricAtlas可以有效比较Web深度研究输出的分析完整性，不同评估管道之间具有高度一致性，并且可追溯的决策与报告证据相关联。