研究人员推出了AskStream,这是一个旨在评估主动视频理解模型的新基准。该基准解决了模型在面对不确定性时需要询问缺失信息这一挑战,这是现实世界中数据可能不完整时常见的问。当前模型在此类主动信息寻求行为方面存在困难,表现最好的模型在提出的Ask-F1指标上仅达到52.18%,表明其在回答前有效寻求澄清的能力存在显著局限。 AI
影响 突显了当前多模态LLM的差距,可能指导未来研究朝着更具交互性和鲁棒性的视频理解系统发展。
排序理由 该条目描述了一篇介绍用于评估AI模型的新颖基准的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- Ask-F1
- AskStream
- Multimodal Large Language Models and Tunings: Vision, Language, Sensors, Audio, and Beyond
- streaming video understanding
- Video-understanding framework for automatic behavior recognition
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →