WikiDiverse

新的SAGE基准和GAR框架推进多模态基础评估

研究人员推出了SAGE，一个旨在评估感知对齐多模态基础的新基准。该基准将现有的VWSD、VerSe和WikiDiverse等任务重新构建为一个以术语为中心的基础的统一协议。此外，他们提出了注疏增强推理（GAR），一个结合了定义基础和约束引导语义验证的框架。实验表明，虽然定义增强对所有子集都有益，但约束引导推理在VerSe中表现出特别的优势，当两种方法结合时，整体性能得到提高。