研究人员推出了ExtractBench,这是一个旨在评估企业环境中模式引导文档提取能力的基准。该基准利用包含370份企业文档、共4,869页的数据集,在数值准确性、记录完整性、接地性和成本方面评估代理。初步结果显示,虽然商业VLMs在长文档方面存在困难,但编码代理准确但成本高昂。LlamaExtract Agentic Plus成为表现最佳者,以显著更低的成本提供与编码代理相当的准确性。 AI
影响 该基准有望推动企业AI代理在准确且经济高效的数据提取方面的改进。
排序理由 该集群描述了一篇介绍AI能力基准的新学术论文。
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →