一篇题为“匹配的结果,不同的注视:带注视的多模态大语言模型搜索与人类的比较”的新研究论文探讨了人类视觉搜索与多模态大语言模型(MLLMs)行为之间的差异。研究发现,虽然MLLMs在目标检测和效率方面可以媲美甚至超越人类的表现,但它们自身的搜索过程却存在根本性差异。这些模型表现出低熵、大振幅的扫描路径,与自身相比,比人类扫描路径之间的相似度更高,这表明它们采用的是单通道架构而非串行架构。 AI
影响 强调了当前基于结果的指标在评估人工智能视觉系统方面的局限性,并建议需要进行过程层面的评估。
排序理由 一篇发布在arXiv上的研究论文,详细介绍了MLLM行为的发现。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- COCO-Search18
- Hugging Face
- Matched Outcomes, Divergent Gaze: How Foveated MLLMs Search Compared to Humans
- Mohamed Amine Kerkouri
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →