研究人员推出 VertiCue-Bench,这是一个新的诊断基准,旨在评估多模态大语言模型 (MLLMs) 在地理空间推理中利用 3D 结构数据(特别是树冠高度模型 (CHMs))的程度。该基准包含 17 个任务中的 1,534 个实例,旨在区分遥感自然场景中的高度感知与语义推理。对 14 个最先进的 MLLMs 的评估显示,尽管模型能够感知高度线索,但它们难以将这种几何理解转化为可靠的语义推理,在需要联合约束时,其表现常常不如仅使用 RGB 的简单模型。 AI
影响 突显了 MLLMs 将 3D 几何数据与语义理解相结合的能力方面存在的关键差距,表明需要改进地理空间推理能力。
排序理由 该集群描述了一篇介绍用于评估 AI 模型基准的新学术论文。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →