研究人员开发了一种新颖的方法来训练用于将语言模型与人类偏好对齐的奖励模型。这种方法被称为注视增强奖励建模,它整合了眼动追踪数据,特别是根据认知心理学发现,将视觉注意力建模为空间梯度分布。与基线方法相比,新模型在偏好预测准确性方面有所提高,并且在阅读过程中与既定的人类注意力模式在定性上是一致的。 AI
影响 通过将人类注意力信号更好地纳入其训练中,这项研究可能带来更准确、更符合认知规律的AI模型。
排序理由 该集群包含一篇详细介绍AI奖励模型训练新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Cognitive Psychology
- eye tracking
- Hugging Face
- Reinforcement Learning from Human Feedback
- Reward Model
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →