Modern Standard Arabic
PulseAugur coverage of Modern Standard Arabic — every cluster mentioning Modern Standard Arabic across labs, papers, and developer communities, ranked by signal.
9 天有情绪数据
LLMs show significant weakness in Arabic dialects beyond MSA
Recent benchmarks like the Saudi dialect evaluation and EDRAC highlight that current LLMs perform poorly on various Arabic dialects, not just MSA. This suggests a systemic issue in how models are trained or evaluated for the diversity of Arabic language use.
New benchmarks for Arabic dialects will spur specialized LLM fine-tuning
The development of benchmarks like the Saudi dialect evaluation and EDRAC, which specifically target Arabic dialects, indicates a growing need for better performance in these areas. We hypothesize that this will lead to increased efforts in fine-tuning existing LLMs or developing new ones specifically for dialectal Arabic applications.
Culturally grounded AI evaluation is emerging for Arabic multimodal tasks
The ImageEval 2026 task, with its focus on culturally grounded Arabic multimodal AI evaluation (including AynVQA and CRAI-Bench), shows a trend towards assessing AI's cultural accuracy in Arabic contexts, moving beyond simple language translation or comprehension.
-
AK_QMUL 的 JAIS-6.7B 模型在阿拉伯语有害提示检测方面表现出色
AK_QMUL 的研究人员开发了一个微调的 JAIS-6.7B 模型,用于检测阿拉伯语中的有害提示。他们的方法利用 QLoRA 进行高效微调,在 ArGuard-2026 共享任务中取得了最高排名。该模型在各种方言和危害领域都表现出高准确率,在二元安全/不安全分类和七向危害领域分类方面尤为突出。
-
新框架增强阿拉伯语大语言模型的知识获取能力
研究人员开发了AQL-Lite框架,旨在高效地使多语言大语言模型适应现代标准阿拉伯语(MSA)。该方法采用质量优先的数据策管线和部分参数持续预训练(CPT)技术。实验表明,与使用原始网络文本相比,在AQL策管的АQL-Lite数据上进行CPT显著提高了阿拉伯语理解能力,并且一个规模化模型在Open Arabic LLM Leaderboard v2上取得了高分。
-
新阿拉伯语依存句法树库揭示方言句法分歧 · 跟踪到1个来源
研究人员开发了MADARTB,这是首个大规模阿拉伯语并行依存句法树库,涵盖五个城市方言(贝鲁特、开罗、多哈、拉巴特和突尼斯)以及现代标准阿拉伯语。该数据集包含5000个句子,使用CATiB依存方案进行标注,揭示了尽管整体结构相似,但方言之间存在显著的句法差异。使用监督解析器和四个LLM进行的比较显示,监督解析器在测试集上达到了87.5%的LAS,而表现最好的LLM达到了85.7%的LAS。这些标注和模型正在公开发布。
-
新基准测试阿拉伯方言中的AI数学推理能力
研究人员推出了DAR-MGSM,这是首个旨在评估方言阿拉伯语数学推理能力的基准。该基准包含五种主要阿拉伯方言和现代标准阿拉伯语的数学应用题,并提供仅翻译版和翻译并本地化版。对十一个以阿拉伯语为中心的多语言大型语言模型的评估显示,在本地化版本上的性能普遍下降,表明在文化接地适应方面存在挑战。进一步分析表明,即使整体准确性相似,本地化问题和翻译问题也常常触发不同的推理路径,这凸显了语言多样性和文化背景对数学推理的影响。
-
NVIDIA Nemotron 3.5 微调方法强调数据精选的影响
NVIDIA 详细介绍了一种为其 Nemotron 3.5 自动语音识别 (ASR) 模型进行沙特阿拉伯方言微调的方法。关键启示是,数据精选,特别是决定从语料库中丢弃哪些话语,对性能的影响比基础模型的选择更大。NVIDIA 的方法包括保留结构良好但可能存在噪声的方言数据,同时使用约 90% 的沙特阿拉伯语和 7% 的英语的加权重放混合,以防止现有语言能力的退化。
-
小米手机通过广告来抵消成本;用户可以禁用它们
小米手机因其价格实惠而广受欢迎,通过在其操作系统中包含大量广告来抵消硬件成本。这些广告出现在各种预装应用程序甚至系统设置中,尽管用户可以通过特定的配置更改来禁用它们。通过调整与系统广告、个性化推荐和应用程序通知相关的设置,用户可以显著减少其小米设备上的广告。
-
新LLM生成的数据集提升阿拉伯语事实核查能力
研究人员推出Arafa,一个为现代标准阿拉伯语事实核查设计的大规模新数据集。该数据集采用了一个三步自动化框架创建,该框架利用大型语言模型(LLMs)从阿拉伯语维基百科生成声明以及支持或反驳的证据。该数据集包含超过181,000个声明-证据对,初步评估显示了高度的标注者间一致性和自动验证的高准确性。在Arafa上微调基于Transformer的模型取得了有希望的结果,最佳模型在测试数据上达到了77%的宏观F1分数,凸显了其在推进阿拉伯语…
-
新的EvoCowork基准测试在真实办公任务上评估AI代理
研究人员推出了EvoCowork,这是一个旨在评估真实办公任务中自我改进AI代理的新基准测试。该基准测试包含跨越演示文稿、文档、电子表格和跨办公室工作流四种模式的240个任务。EvoCowork评估提交的产物在内容准确性、结构完整性、公式正确性、文件间一致性和视觉质量方面。初步评估表明,虽然AI代理可以在提供反馈的任务上提高性能,但这些提升并不总是能转移到协调的跨办公室工作流中。
-
大型语言模型阿拉伯语方言分析发现内部表征中不存在MSA主导地位
一篇新的研究论文分析了大型语言模型(LLMs)关于阿拉伯语方言的内部表征。该研究挑战了现代标准阿拉伯语(MSA)在大型语言模型阿拉伯语方言表征中占主导地位的假设,并未发现支持这一说法的证据。相反,研究表明,在大型语言模型中,方言表征形成了一个密集且重叠的空间,其可分离性程度因模型架构和层而异。
-
TII推出Falcon-Emirati-7B大语言模型以支持阿联酋方言
技术创新研究所(TII)开发了Falcon-Emirati-7B,这是一个专门的大型语言模型,旨在理解和生成阿联酋阿拉伯语。该模型建立在Falcon-H1-Arabic的基础上,采用了状态空间模型和Transformer注意力机制的混合架构,以实现高效精确的语言处理。Falcon-Emirati-7B旨在捕捉阿联酋口语方言中固有的细微差别、文化背景和非字面含义,而这些内容通常在通用阿拉伯语模型中会丢失。
-
神经符号框架改进阿拉伯语句法歧义消解
研究人员开发了一种新颖的神经符号框架来解决现代标准阿拉伯语(MSA)中的句法歧义。该方法通过将歧义消解构建为一个决策任务,整合了生成式句法原理和AraBERT Transformer模型。明确构建并评估了语言学上合理的替代方案,在未见过的数据上达到了高准确率。该框架证明了形式句法表示可以在神经模型中有效操作化,以实现可控且可解释的自然语言处理。
-
新摩洛哥塔马齐特语语音数据集发布,用于人工智能研究
研究人员开发了TutlAit v1,这是一个新的众包摩洛哥塔马齐特语语音数据集,解决了该语言标记音频数据稀缺的问题。该数据集包含阿拉伯语转录和地区口音标签,通过定制的Web应用程序收集。TutlAit v1包含超过13,000个音频文件,总计约21小时,重点关注Atlas和Souss方言,可用于语音识别、翻译和口音识别任务。
-
新数据集WASIL增强了阿拉伯语大型语言模型口语交互能力
研究人员推出了WASIL,一个旨在改善阿拉伯语口语与大型语言模型(LLMs)交互的新数据集。该数据集包含超过8,500轮真实场景下的口语交互,附带音频、自动语音识别(ASR)假设、助手响应和用户反馈,其中14.2%的交互被标记为不满意。WASIL还包含一个2,000轮的测试集,涵盖现代标准阿拉伯语和四种主要方言,并附有可回答性标注,以区分ASR错误和真正的无法回答。该资源旨在通过区分语音识别问题和模型固有的能力,来促进对LLM语音助手的更好评估。
-
发布新的沃洛夫-阿拉伯语平行语料库用于机器翻译研究
研究人员推出 MudawanSn,这是一个旨在改进沃洛夫语和现代标准阿拉伯语之间机器翻译的新平行语料库。该资源包含 1,271 个句子对齐的语对,源自塞内加尔新闻话语,涵盖政治、社会、宗教和体育等主题。通过对四个机器翻译系统进行基准测试,研究发现使用 MudawanSn 进行微调可显著提高翻译质量,其中 AfriNLLB-12 模型取得了显著的 BLEU 和 chrF++ 分数。该语料库可公开使用。
-
古兰经文本映射和诵读验证器发布
研究人员开发了一种新的方法,用于在奥斯曼体和标准阿拉伯语拼写形式之间映射古兰经文本,解决了由Unicode字符U+0670引起的差异。这项工作包括一个2,290对单词的映射和一个七步标准化流程,实现了90.9%的经文对齐。在此基础上,创建了一个确定性的、不依赖LLM的验证器,用于评估古兰经诵读的准确性,在测试套件上达到了98.4%,并在所有测试的阿拉伯语ASR转录本中正确识别了经文。
-
新的 AlphaMWE 语料库揭示了大型语言模型在多词表达式翻译中的盲点
研究人员开发了 AlphaMWE 语料库,用于测试大型语言模型(LLMs)在机器翻译方面的能力,特别关注多词表达式(MWEs)。该研究评估了 31 个不同语言对的机器翻译系统,包括英语到中文、波兰语、德语以及几种阿拉伯语方言。使用 BLEU 和 BERT-score 等指标进行的自动评估,以及后续的人工评估,都揭示了比喻性语言和多词表达式仍然是大型语言模型的挑战,并且汇总分数可能会掩盖特定语言的错误。
-
人工智能客服因可访问性问题被起诉
一位患有多系统萎缩的 Mastodon 用户正在寻求法律咨询,起诉那些使用人工智能和自动语音客服的公司。该用户因言语障碍,难以使用仅有人工智能的客服系统,并且通过 ADA 提示要求人工协助的请求均未成功。该用户打算提起诉讼,迫使这些公司满足 ADA 请求或提供直接的人工支持。
-
新的EDRAC基准测试旨在评估阿拉伯语方言阅读理解能力
研究人员推出EDRAC,这是一个旨在评估机器在各种阿拉伯语方言中阅读理解和问答能力的新基准。该基准解决了方言阿拉伯语相对于现代标准阿拉伯语资源不足的问题,而现代标准阿拉伯语通常是现有问答数据集的重点。EDRAC包含来自口头交流的499个段落和近5000个问答对,涵盖五种主要方言:埃及方言、摩洛哥方言、阿联酋方言、叙利亚方言和沙特阿拉伯方言。对以阿拉伯语为中心和多语言的大型语言模型的初步基准测试显示,语义答案质量与方言准确性之间存在显著…
-
新基准揭示大型语言模型在沙特方言和文化细微差别方面存在困难
研究人员开发了一个新的基准来评估大型语言模型在沙特方言和文化细微差别方面的表现,超越了传统的现代标准阿拉伯语(MSA)评估。该基准包含31个专家编写的提示,结果显示,像Claude Opus-5、Gemini 3.7、GPT-5.6和Kimi K3等当前最先进的模型表现不佳,得分在42.7%到53.1%之间。一个重要的发现是,模型主要因扭曲语域和语用细微差别(模糊框架)而失败,而不是完全的幻觉。
-
ImageEval 2026 任务着眼于具有文化背景的阿拉伯语多模态人工智能评估
ImageEval 2026 共享任务专注于具有文化背景的阿拉伯语多模态评估,包含两个主要部分。AynVQA 解决了英语和现代标准阿拉伯语的口语视觉问答和幻觉检测问题,而 CRAI-Bench 评估了文本到图像生成模型的文化准确性。共有十四个团队参赛,其中十二个提交了详细的系统描述,概述了零样本提示和视觉语言模型微调等各种方法。