一项发表在arXiv上的新研究对包括英语、西班牙语、法语和德语在内的多种语言中的大型语言模型(LLMs)的刻板印象偏见进行了审计。该研究利用了12,000条Reddit帖子来检查性别、种族和宗教偏见,发现在所有模型-语言条件下,宗教表现出最高的失衡。西班牙语表现出最大的性别偏见,而德语在种族和宗教偏见方面最高。值得注意的是,在评估中,基于专有API的模型表现不如开源模型。 AI
影响 强调了在敏感应用中部署LLMs之前进行多语言偏见审计的必要性。
排序理由 学术论文,详细介绍了审计LLM偏见的新方法。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →