BanglaBBQ

新的BanglaBBQ基准揭示了孟加拉国背景下大型语言模型中的偏见

研究人员推出了BanglaBBQ，这是一个旨在评估孟加拉国背景下问答模型偏见的新基准。该基准改编了现有模板，并引入了反映孟加拉国常见社会刻板印象的新类别，例如婚姻状况、年龄和地区出身。使用Qwen3、GPT-4.1 mini和Gemini 2.5 Flash等模型进行的评估显示，这些模型表现出偏见行为，尤其是在语境模糊或与刻板印象相悖时，语言差异会影响模型性能。