EspanStereo

新框架构建具有文化特异性的LLM刻板印象数据集

研究人员开发了一个新的框架，用于创建英语以外语言的刻板印象数据集，解决了成本高昂和代表性不足的文化资源匮乏的问题。这种人机协作方法被用于构建EspanStereo，一个涵盖欧洲和拉丁美洲的西班牙语数据集，该数据集识别了普遍存在和具有文化特异性的偏见。使用EspanStereo进行的评估显示，不同国家西班牙语LLM之间的刻板印象行为存在显著差异，这强调了进行具有文化敏感性的偏见评估的必要性。