实体
Android World
Android World
PulseAugur coverage of Android World — every cluster mentioning Android World across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
MobileDreamer框架通过生成式草图世界模型增强GUI代理能力
研究人员推出了MobileDreamer，一个旨在增强移动GUI代理能力的创新框架。该系统利用生成式草图世界模型来预测行动结果，使代理能够规划超越即时屏幕交互的长期任务。该模型将屏幕图像转换为与任务相关的关键草图，并通过一种顺序无关的学习策略保留空间信息。在Android World基准测试上的实验表明，MobileDreamer将任务成功率显著提高了5.25%，并能准确预测关键的GUI元素。
-
新型 VLM 从移动屏幕演示中提取操作知识
研究人员开发了一种名为 Teach VLM 的新方法，用于从移动屏幕演示中提取操作知识。该模型分析视频中的关键帧，以理解操作、UI 元素和执行顺序，将视觉状态转换转化为自然语言描述。为了克服数据稀缺性，创建了一个系统性的数据飞轮以实现可扩展的获取，并引入了一个中文移动屏幕教学基准进行评估。Teach-and-Repeat 范式利用这些操作知识来指导基于屏幕的执行代理，在 Android World 上任务成功率方面显示出显著的改进。