研究人员推出了TreasuryQA Bench,这是一个旨在评估AI代理处理扫描财务文档能力的新基准。与之前的基准不同,TreasuryQA要求代理通过模型上下文协议服务器搜索扫描的PDF文件,并使用OCR提取特定数据,模拟真实的档案工作。初步测试显示,代理之间的性能差异显著,Claude Opus 5.5的准确率最高,达到64.8%,而GPT-5.6 Terra的得分为16.7%。该基准还突显了扫描质量对代理性能的影响,所有测试的代理在处理更模糊的扫描件时都遇到了更大的困难。 AI
影响 该基准有望推动AI代理处理和提取非结构化扫描文档信息的能力的提升,这对于许多企业应用至关重要。
排序理由 该集群描述了一个新的基准和研究论文,评估了AI代理在特定任务上的能力。[lever_c_demoted from research: ic=1 ai=1.0]
- AI agents
- Claude Code
- Claude Opus 5.5
- Codex
- Dropbox
- GPT-5.6 Terra
- MCP
- Model Context Protocol
- Reductoonops
- TreasuryQA Bench
- United States Department of the Treasury
- Veris
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →