North Africans

发布新的阿拉伯语方言安全基准

研究人员推出了ArabicDialectSafety，这是一个旨在评估不同方言的阿拉伯语内容安全性的新数据集。该数据集包含六种阿拉伯语变体的25,071个提示，并标注了方言和七个危害类别。与大型语言模型相比，微调后的MARBERTv2在安全分类方面表现更优，取得了较高的Macro-F1分数。研究还发现，在表示层面整合方言信息最为有效，尽管资源较少的马格里布方言表现有所滞后。