Mistral OCR 4.1

Datalab推出OmniExtractBench以标准化AI文档提取评估

Datalab推出了OmniExtractBench，这是一个旨在解决结构化文档提取任务中偏差和不透明性问题的开放基准。该新基准评估AI系统从PDF文档填充JSON模式的准确性，并使用提供决策解释的确定性评分器。OmniExtractBench旨在提供一种标准化和可审计的评估方法，这与Datalab认为难以比较或验证的供应商创建的排行榜形成对比。该基准包含来自各种来源的620份文档，并采用基于内容的配对方法和匈牙利算法进行准确的表格对齐。