PulseAugur
实时 09:25:19
English(EN) I Seek You in Videos: Identity-Conditioned Queries for Person-Centric Video Reasoning

新的ISYV框架推进了面向人物的视频推理

研究人员引入了身份条件查询(ICQ)任务和相应的解决方案ISYV(I Seek You in Videos),以改进面向人物的视频推理。ISYV包括一个基准数据集(ISYV-Bench),包含1300多个视频,一个大型训练集(ISYV-75K),以及一个旨在利用信息丰富视频片段的新颖框架。实验表明,当前的大型多模态模型在ISYV-Bench上表现不佳,尤其是在跨领域身份匹配和长时程跟踪方面,尽管ISYV-Model显示出有希望的结果。 AI

影响 这项研究引入了一个新的基准和框架,有望推动更复杂的视频理解模型的发展,特别是在涉及身份跟踪和行为分析的任务方面。

排序理由 该集群描述了一篇介绍视频推理新任务、基准、数据集和框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的ISYV框架推进了面向人物的视频推理

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Shibo Gao, Chongxiao Wang, Chenglong Huang, Jie Ma, Haolin Shi, Fei Ding, Jing Li, Qiang Lyu, Yangyang Liu, Yang Liu, Jun Liu, Linlin Huang, Peipei Yang ·

    视频中寻找你:面向以人为中心的视频推理的身份条件查询

    arXiv:2608.07417v1 Announce Type: cross Abstract: Real-world video reasoning often involves multimodal, multi-source inputs, whereas existing video reasoning tasks typically assume a simplified video-text setting, limiting identity matching and person-centric reasoning. To bridge…