YANAMI-Bench

新的 YANAMI 数据集针对多模态人工智能模型中的有状态交互

研究人员推出了 YANAMI，这是一个新的大规模多模态数据集和基准，旨在评估统一多模态模型 (UMMs) 中的有状态交互。当前的 UMM 在需要跟踪多轮对话中不断变化的对话状态的任务时经常遇到困难，YANAMI 旨在解决这一局限性。该数据集包含 400,000 个对话和超过 200 万张图像，涵盖图像编辑和视觉推理等场景，并评估对话状态理解和视觉实现。