研究人员推出了EgoPathBench,这是一个旨在评估视觉语言模型(VLM)零样本航点导航能力的新基准。该基准通过评估VLM的综合空间智能,包括目标识别、行动后果评估、距离估计和路径规划,来解决现有数据集的局限性。EgoPathBench包含31,852个训练问题、1,345个验证问题和1,111个基准问题,每个问题都包含一个自中心RGB图像、一个自然语言目标和可见的航点。目前的VLM显示出显著的局限性,排名最高的模型仅达到28.3的EgoPath分数,并且在具身导航任务中遇到困难。在EgoPathBench训练数据上微调Qwen 3.5-4B显著提高了其分数至38.9,并提升了在外部空间基准上的表现。 AI
影响 突出了当前视觉语言模型在现实世界导航任务中的显著局限性,表明需要改进空间推理能力。
排序理由 该条目描述了一篇介绍用于评估AI模型基准的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- EgoPathBench
- Embodied Pathways and Ethical Trails: Studying Learning in and through Relational Histories
- Hugging Face
- Intent Path
- Point Path
- Qwen 3.5-4B
- vision-language model
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →