研究发现 LVLM 在图像序列时间推理方面存在困难

一项新的研究论文强调了当前大型视觉语言模型（LVLM）评估图像序列中时间推理能力的一个关键缺陷。研究表明，这些模型表现出显著的偏见，例如首因效应和近因效应，其中图像帧的位置不成比例地影响它们对叙事连贯性而非语义一致性的判断。这表明现有的基于 Transformer 的裁判模型不适合评估视觉叙事的时间流程，因此有必要开发新的评估范式，将序列视为统一的逻辑结构。 AI

影响 突出了当前多模态评估中的一个关键差距，可能减缓生成式多媒体的进展，并需要新的方法来评估视觉叙事。

排序理由 arXiv 上发表的研究论文，详细介绍了 LVLM 在时间推理方面的局限性。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

• alphaXiv
• arXiv
• CatalyzeX
• DagsHub
• Gotit.pub
• Hugging Face
• Large Vision Language Models
• LVLMs
• ScienceCast
• transformer-based judges

• 论文
• 模型发布

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →