OS-Kairos

新框架提升MLLM移动代理的置信度和任务成功率

研究人员开发了Mobile-Aptus，一个置信度驱动的框架，旨在提高基于多模态大语言模型（MLLM）的移动代理的交互能力。该框架通过使代理能够输出置信度分数以及动作，然后使用语义相似性和直接偏好优化来纠正这些分数，从而解决了过度执行和过度请求的问题。Mobile-Aptus在四个基准测试中展示了最先进的性能，在任务成功率方面取得了显著的提高，并减少了对人工干预的需求。