semCER

新的 semCER 指标通过加权错误严重性来改进 OCR 和 VLM 评估

研究人员开发了一种名为 semCER 的新指标来评估光学字符识别 (OCR) 和视觉语言模型 (VLM)。与标准的字符错误率 (CER) 不同，semCER 根据错误严重性（由 LLM 判断）为不同类型的错误分配不同的惩罚。这种方法旨在更好地反映人类读者如何看待各种语言（包括英语、越南语、标准中文和泰卢迦语）中的转录错误造成的损害。