一篇新的arXiv论文,题为“迷失在翻译中:为何较低的偏见分数并不意味着更公平的模型”,调查了多语言语言模型偏见审计的可靠性。研究发现,当模型在英语以外的语言中进行测试时,刻板印象分数通常会下降,但这一下降并不一定表明公平性有所提高。研究强调,不完美的翻译和固有的项目级分数差异显著导致了这些分数差异,使得平均分数成为衡量跨语言真正公平性的不可靠指标。作者还确定了可能掩盖偏见信号的常见管道错误,并发布了他们的代码以供进一步研究。 AI
影响 强调了当前人工智能偏见审计方法中潜在的缺陷,表明需要更强大的多语言模型评估技术。
排序理由 该集群包含一篇发表在arXiv上的研究论文,详细介绍了关于人工智能模型偏见的新发现。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- DagsHub
- Gotit.pub
- Hindi
- Hugging Face
- Korean
- ScienceCast
- Spanish
- StereoSet
- Swahili
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →