PureDocBench

新的PureDocBench基准揭示文档解析远未解决

研究人员推出了PureDocBench，一个用于文档解析的新基准，它解决了现有OmniDocBench数据集存在的问题，该数据集存在标注错误和潜在的污染。PureDocBench是程序化生成且可追溯源的，在干净、数字降级和真实世界文档场景中提供了更可靠的评估。对40个模型的初步评估显示，文档解析远未解决，模型之间存在显著的性能差距，并且公式识别存在共同的瓶颈。