PulseAugur
实时 11:35:53
English(EN) UXBench: Benchmarking User Experience in AI Assistants

新的UXBench基准测试评估AI助手用户体验

研究人员推出了UXBench,这是一个旨在评估人工智能助手用户体验的新基准测试。该基准测试侧重于偏好对齐和对话生成,使用了来自中国人工智能助手的70,000多条交互日志。UXBench包含三个任务——UX Judge、UX Eval和UX Recovery——并已在26个大型语言模型上进行了测试,揭示了这些模型在理解和改善用户体验方面的表现。 AI

影响 为AI助手建立了一个新的评估框架,推动超越原始能力的用户中心优化。

排序理由 该集群包含一篇介绍AI助手新基准测试的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.CL TIER_1 English(EN) · Davey Chen ·

    UXBench:为 AI 助手评测用户体验

    As AI assistants serve millions of users daily, evaluating user experience (UX) beyond general model capability has become increasingly important. We present UXBench, the first user-centric benchmark grounded in real user feedback signals for evaluating preference alignment and d…