研究人员开发了SVMemAgent,一个专为流式视频在线帧选择设计的新颖系统。与需要完整视频访问和预定义查询的传统方法不同,SVMemAgent实时运行,持续更新先前观察到的内容的紧凑内存。该代理使用Group Relative Policy Optimization (GRPO)进行训练,并从多样化的问答对中获得奖励,以确保它选择具有普遍信息量的帧,从而决定保留或丢弃传入的帧。 AI
影响 这项研究通过实现实时、查询无关的帧选择,有可能提高视频问答等任务处理流式视频数据的效率。
排序理由 这是一篇详细介绍视频流在线帧选择新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →