OVO-Bench

SelectStream 框架通过选择性内存分配增强流媒体视频 AI

研究人员开发了 SelectStream，一个用于流媒体视频理解模型的新颖框架，该框架选择性地分配内存，以解决在固定计算预算下处理连续视频数据的挑战。与之前不加区分地注入历史记录的方法不同，SelectStream 使用条件查询的证据预算来优先考虑当前场景感知。该框架采用由惊喜驱动的窗口化、保留优先级的巩固以及图推理来管理内存，在 StreamingBench 和 OVO-Bench 等基准测试中取得了强劲的性能。