SymbalBench

新方法Symbal检测AI生成图像字幕中的系统性错误

研究人员开发了Symbal，一种检测多模态大型语言模型（MLLMs）生成字幕中系统性失配的新方法。当字幕中的重复性错误与图像中的特定视觉特征相关联时，就会发生这种失配。Symbal利用现有的基础模型的双阶段方法来识别这些错误并进行总结。为了评估其有效性，创建了一个名为SymbalBench的新基准，该基准包含自然和医学领域的170万个图像-文本对，并标注了系统性失配。Symbal在该基准上表现强劲，显著优于基线。