ISYV-Bench

新的ISYV框架推进了面向人物的视频推理

研究人员引入了身份条件查询（ICQ）任务和相应的解决方案ISYV（I Seek You in Videos），以改进面向人物的视频推理。ISYV包括一个基准数据集（ISYV-Bench），包含1300多个视频，一个大型训练集（ISYV-75K），以及一个旨在利用信息丰富视频片段的新颖框架。实验表明，当前的大型多模态模型在ISYV-Bench上表现不佳，尤其是在跨领域身份匹配和长时程跟踪方面，尽管ISYV-Model显示出有希望的结果。