研究人员推出了ArabicDialectSafety,这是一个旨在评估不同方言的阿拉伯语内容安全性的新数据集。该数据集包含六种阿拉伯语变体的25,071个提示,并标注了方言和七个危害类别。与大型语言模型相比,微调后的MARBERTv2在安全分类方面表现更优,取得了较高的Macro-F1分数。研究还发现,在表示层面整合方言信息最为有效,尽管资源较少的马格里布方言表现有所滞后。 AI
影响 该基准将能够对处理不同阿拉伯语方言的LLM进行更细致的安全评估。
排序理由 该集群包含一篇介绍特定NLP任务新基准数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- ArabicDialectSafety
- arXiv
- Egyptian
- MARBERTv2
- Modern Standard Arabic
- North Africans
- Palestinian
- Syria
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →