研究人员推出了LongDocBench,这是一个旨在评估长文档结构信息恢复能力的新基准。该基准侧重于两项关键任务:重建目录(TOC)层级,以及识别表格和图形等元素与其关联文本之间的上下文关系。LongDocBench包含85份真实世界文档,包括财务报告和教科书,并对超过3900个标题节点和3200个上下文关系进行了标注。实验表明,改进的目录层级和上下文关系可以增强长文档问答任务中的推理能力,而当前的文档解析器尽管在页面级表现良好,但在这些特定的恢复任务上仍面临挑战。 AI
影响 该基准有望推动AI在理解和处理复杂、长篇幅文档方面的能力提升,从而增强研究分析和信息检索等应用。
排序理由 发布基准的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →