研究人员开发了一个新的基准来评估语言模型在对话式AI中适应不断变化的人类偏好的能力。该基准包含250个跨五种语言的个性化角色和25,000个对话轮次,揭示了模型识别恰当策略的能力与其生成策略的能力之间存在显著差距。虽然模型在提供选项时能够识别正确的策略,但在开放式生成中,它们倾向于利用现有偏好,策略校准下降了35-46%。针对条件化人类偏好的定向训练可以提高模型性能,将用户可接受性差距缩小三分之一,以应对分布外角色和对话风格。 AI
影响 强调了当前LLM在动态用户偏好适应方面的关键局限性,表明需要改进训练方法。
排序理由 研究论文,详细介绍了新的基准和关于语言模型行为的发现。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX Code Finder for Papers
- Connected Papers
- CORE Recommender
- DagsHub
- Gotit.pub
- Hugging Face
- Influence Flower
- Litmaps
- ScienceCast
- scite Smart Citations
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →