研究人员开发了 RankGround,一个新颖的两阶段框架,旨在提高多模态代理进行图形用户界面 (GUI) 基础定位的效率和准确性。该方法使用一个名为 GroundRanker 的轻量级多模态重排器,该重排器通过单次视觉语言模型 (VLM) 调用来识别查询最相关的图像裁剪。据报道,与现有方法相比,RankGround 在推理速度上提高了 1.4 倍,在定位准确性上提高了 5.5%,在 GUI 基础定位方面树立了新的最先进水平。 AI
影响 提高了多模态代理与数字界面交互的效率和准确性。
排序理由 这是一篇详细介绍 GUI 基础定位新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →