KU-PCP

新的基准 KU-PCPE 测试 AI 在图像构图方面接地视觉证据的能力

研究人员推出了 KU-PCP Elements (KU-PCPE)，这是一个新的基准，旨在评估模型在多大程度上能够识别图像中证明给定摄影构图标签的具体视觉区域。该基准包含超过 4,000 个带注释的训练掩码和 1,327 个任务的测试集，每个任务在图像-标签组合中包含三个掩码。初步结果显示，当前的视觉语言模型在接地视觉证据方面与人类标注者之间存在显著差距，最好的 VLM 达到了 .395 的 Dice 分数，而人类专家达到了 .867。