André-Louis Rochet

研究发现：AI代理工具可改进金融演示文稿生成

一项新的研究论文探讨了代理工具的有效性，该工具结合了27B语言模型与财务计算和验证检查，用于在公司和投资银行业生成演示文稿。研究发现，当由人类法官评估时，与直接从简短提示生成相比，该系统在开发交付成果方面始终得分更高。然而，论文指出，使用LLM法官来指导工程变更引发了疑问：更高的分数是否反映了真实的文档改进，还是评分标准的转变。研究还观察到法官在最终排名上的一致性存在差异，并指出重复评分可能会改变未更改演示文稿的分数，这使得评估微小改进变得复杂。