研究人员引入了身份条件查询(ICQ)任务和相应的解决方案ISYV(I Seek You in Videos),以改进面向人物的视频推理。ISYV包括一个基准数据集(ISYV-Bench),包含1300多个视频,一个大型训练集(ISYV-75K),以及一个旨在利用信息丰富视频片段的新颖框架。实验表明,当前的大型多模态模型在ISYV-Bench上表现不佳,尤其是在跨领域身份匹配和长时程跟踪方面,尽管ISYV-Model显示出有希望的结果。 AI
影响 这项研究引入了一个新的基准和框架,有望推动更复杂的视频理解模型的发展,特别是在涉及身份跟踪和行为分析的任务方面。
排序理由 该集群描述了一篇介绍视频推理新任务、基准、数据集和框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →