OVI-Train

新基准OVIBench测试中断情况下的AI视频问答

研究人员推出了OVIBench，这是一个新的基准，旨在评估在用户可能中断模型的在线视频问答场景中视觉语言模型（VLMs）的表现。该基准通过模拟取消、误触发和纠正等现实中断，解决了现有离线模型的局限性。OVIBench包括一个标准化的测试协议、一个多维度指标套件和一个训练数据集（OVI-Train），以促进中断感知微调，并展示了在该数据上训练的模型性能的显著提升。