研究人员推出了ProactiveBench,一个旨在评估流式视频模型主动互动能力的新评估框架。与现有的被动评估不同,ProactiveBench以一秒为间隔测试模型,无需明确的响应提示,模拟人类般的监控和及时响应。该框架包括六个子任务,这些任务的触发器模糊性和时间容忍度各不相同,结果显示大多数当前系统倾向于过早响应而不是错过事件,这凸显了它们在时间决策方面存在的显著差距。 AI
影响 这一新基准可能会推动更具上下文感知能力和响应能力的AI系统在实时视频分析领域的发展。
排序理由 该项目是一篇研究论文,详细介绍了一个用于评估AI模型的新基准。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →