研究人员推出了一种名为VideoABC的新框架，旨在衡量视频-LLM的视频-问题对的复杂度。这种非参数度量利用视频属性词汇表，例如场景复杂度和事件速度，来估计视频-LLM在给定输入上失败的概率。VideoABC结合了k-means和通用格量化器，以确保即使在参考数据有限的情况下也能进行准确的估计和泛化。实验表明，该方法在性能上优于其他方法，同时提供了对基准复杂度可解释的见解。 AI
影响 为评估和理解视频-LLM的性能限制提供了一个新指标。
排序理由 这是一篇研究论文，详细介绍了一种用于衡量LLM视频复杂度的新框架。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →