WarBias

新的WarBias基准测试旨在解决LLM对退伍军人和国内流离失所者的刻板印象

研究人员开发了WarBias，这是一个新的双语基准测试，旨在评估大型语言模型（LLM）对国内流离失所者（IDP）和退伍军人的刻板印象。与关注性别或种族等受保护特征的常见偏见基准测试不同，WarBias关注的是代表性不足的群体。该基准测试有乌克兰语和英语两种版本，包含句子三元组和多项选择题，这些题目源自120个刻板印象声明的分类法。初步评估显示，一些LLM倾向于选择刻板印象的句子，尤其是在涉及国内流离失所者方面。