研究人员开发了一种新的方法来评估 GUI 基础模型,该模型旨在理解用户界面交互。当前的评分标准是根据点击是否落在特定标注框内来评分,但发现这种方法不完整。新方法认为,如果一次点击能达到与点击目标元素相同的效果,即使它点击的是一个不同但功能等效的元素,也应被视为正确。该方法应用于多个模型后发现,标准评分标准拒绝的相当一部分点击实际上是正确的,这使得在 ScreenSpot-v2 基准测试上的评分提高了 0.2 到 1.8 分。 AI
影响 这种新的评估方法可以更准确地评估 GUI 基础模型,有可能加速其在实际应用中的开发和部署。
排序理由 该集群包含一篇学术论文,详细介绍了一种评估 AI 模型的新方法论。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →