PulseAugur
实时 11:14:28
English(EN) Grounding Computer Use Agents on Human Demonstrations

新数据集和模型推动桌面计算机使用代理发展

研究人员推出了 GroundCUA,这是一个大规模数据集,旨在通过将自然语言指令准确地连接到桌面环境中的屏幕元素来改进计算机使用代理。该数据集包含 56,000 张屏幕截图,涵盖 87 个应用程序,拥有超过 356 万条人工验证的注释。利用此数据集,GroundNext 模型(3B 和 7B 参数规模)在五个基准测试中取得了最先进的性能,且所需的训练数据量远少于以往的方法。 AI

影响 增强了 AI 代理在桌面环境中的能力,可能带来更复杂的自动化工具。

排序理由 该集群包含一篇研究论文,详细介绍了用于改进 AI 代理的新数据集和模型。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Aarash Feizi, Shravan Nayak, Xiangru Jian, Kevin Qinghong Lin, Kaixin Li, Rabiul Awal, Xing Han L\`u, Johan Obando-Ceron, Juan A. Rodriguez, Nicolas Chapados, David Vazquez, Adriana Romero-Soriano, Reihaneh Rabbany, Perouz Taslakian, Christopher Pal, Spa… ·

    Grounding Computer Use Agents on Human Demonstrations

    arXiv:2511.07332v2 Announce Type: replace-cross Abstract: Building reliable computer-use agents requires grounding: accurately connecting natural language instructions to the correct on-screen elements. While large datasets exist for web and mobile interactions, high-quality reso…