SVMem

新的SVMemAgent实现了视频流的查询无关在线帧选择

研究人员开发了SVMemAgent，一个专为流式视频在线帧选择设计的新颖系统。与需要完整视频访问和预定义查询的传统方法不同，SVMemAgent实时运行，持续更新先前观察到的内容的紧凑内存。该代理使用Group Relative Policy Optimization (GRPO)进行训练，并从多样化的问答对中获得奖励，以确保它选择具有普遍信息量的帧，从而决定保留或丢弃传入的帧。