一项新的研究论文详细介绍了大型语言模型(LLM)如何系统地将非裔美国人英语(AAE)改写为标准美式英语(SAE),从而有效地重写了该方言。该研究引入了一个使用条件方言组不变性(cDGI)来审计这种偏见的框架,并确定了负数一致性(negative concord)是关键触发因素。为了缓解偏见,研究人员应用了激活引导(activation steering)这一无需训练的方法,该方法在保持SAE流畅性的同时显著减少了偏见。这项工作还包括发布了REAL-AAE,这是一个包含大量AAE和SAE文本的平行语料库。 AI
影响 凸显了大型语言模型(LLM)中存在的重大偏见,这可能会影响数百万使用者的沟通和代表性。
排序理由 该集群包含一篇研究论文,详细介绍了大型语言模型(LLM)偏见的发现和提出的缓解方法。
- activation steering
- African American English
- BERTScore
- conditional Dialect Group Invariance
- large language models
- REAL-AAE
- Standard American English
- arXiv
- Dialect Group Invariance
- Hugging Face
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →