Search Agents

新基准评估搜索代理在日常任务中的表现

研究人员开发了DailyReport，这是一个旨在评估搜索代理（SAs）在现实的、开放式的日常搜索任务中的能力的新基准。与之前专注于特定场景的基准不同，DailyReport包含150个任务和3500多个评分标准，反映了当前用户的用户信息需求。该基准通过跨不同维度的级联评分标准来评估任务，提供可解释的分数，并且对17个代理系统的初步测试表明，当前的SAs尚未达到用户的期望。