一篇新论文分析了OLMo 3语言模型在其训练生命周期中的职业性别偏见。研究人员发现,包括监督微调(SFT)、直接偏好优化(DPO)和人类反馈强化学习(RLHF)在内的训练后阶段,并未持续减少性别差异。虽然当明确说明性别时,该模型在男性和女性角色方面表现出相似的叙事多样性,但其自身的假设显示出相对于美国劳动力构成而言,存在一种偏向女性的倾斜,并且每个训练后阶段都加剧了这种偏见。对SFT语料库的分析表明,女性代币存在适度的盈余,不足以解释观察到的下游影响。 AI
影响 强调了训练后方法可能无意中加剧LLM中性别偏见的潜力,需要仔细评估。
排序理由 学术论文分析开放语言模型中的偏见。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →