一个名为 AtariBench 的新基准已被开发出来,用于评估视觉语言模型(VLMs)在动态环境中的时空推理能力。该基准利用了 20 款 Atari 2600 游戏,要求模型根据高时间分辨率的游戏流做出顺序决策。初步实验表明,当前最先进的 VLM 在推断物体运动方面存在困难,表现出脆弱的决策能力,并且经常忽略视觉反馈而偏向于文本历史。 AI
影响 突出了当前视觉语言模型的一个关键差距,表明需要改进时空推理能力以应对现实世界的动态应用。
排序理由 该集群描述了一个用于评估 AI 模型的新基准,该基准发表在一篇学术论文中。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →