ZeroSight

新基准 ZeroSight 测试零样本图像检索

研究人员推出了 ZeroSight，这是一个旨在更严格地评估零样本组合图像检索 (ZS-CIR) 能力的新基准。现有数据集通常使用模型已经训练过的图像，这会损害零样本的前提，并且缺乏参考图像和目标图像之间的一致关系。ZeroSight 利用视频源数据和 LLM 生成的字幕来确保真正的零样本条件和一致的配对，同时还提出了一种名为 SC4CIR 的新方法，通过识别困难的负样本目标来提高性能。