Haitian Creole

新基准揭示大型语言模型在海地克里奥尔语方面缺乏文化意识

研究人员开发了一个新的基准，用于评估大型语言模型（LLMs）在海地克里奥尔语方面的文化意识。研究发现，海地克里奥尔语与资源更丰富的法语之间存在显著的性能差异，大型语言模型在处理海地克里奥尔语时表现出较少的文化细微差别，并且更容易受到法语语言干扰的影响。故事生成任务揭示了对海地角色的刻板印象描绘，即使在看似积极的叙述中也是如此，这凸显了改进AI模型中代表性不足的语言的必要性。