Meituan Xiaotuan

新的ATLAS框架增强了用于工业用途的大语言模型代理的评估

研究人员推出了一种新颖的双视界诊断评估框架ATLAS，用于评估由大语言模型驱动的工业工具使用代理。该框架旨在通过识别能力缺陷并指导优化优先级来提高这些代理的可靠性。ATLAS在请求视界提供轨迹信号，以查明执行问题；在交互视界提供用户信号，以确保跨用户互动的持续响应能力。该系统已在美团小团的生产流量上进行了评估，展示了用户参与度和业务成果的提升。