研究人员开发了EnGRICH,一个旨在改进用于优化大型语言模型(LLM)的生成式奖励模型(GRM)的新框架。GRM在偏好判断的同时提供详细的批评,但其可靠性至关重要。EnGRICH采用在稀疏人类批评上训练的“MetaCritic”来构建评分标准并评估生成批评的质量。这种方法使GRM能够将从人类反馈中学到的评估标准泛化到仅提供基于结果的偏好的大型数据集上,从而在七个奖励模型基准测试中提高了性能。 AI
影响 通过提高奖励模型的可靠性和泛化能力来增强LLM优化,可能带来更强大的AI系统。
排序理由 该集群包含一篇详细介绍生成式奖励模型新框架的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →