BanglaSocialBench 基准测试揭示大型语言模型难以处理文化细微差别

作者 PulseAugur 编辑部 · [1 个来源] · 2026-05-04 04:00

研究人员推出了 BanglaSocialBench，这是一个新的基准测试，旨在评估大型语言模型在孟加拉语中理解和使用社会语用学和文化细微差别的能力。该基准测试侧重于语境相关的语言使用，包括称谓、亲属关系推理和社会习俗，而不是事实回忆。对十二个当前大型语言模型的评估显示出持续的文化不匹配，例如默认使用过于正式的语言以及混淆亲属称谓，这凸显了它们在应用文化上适当的沟通方面的局限性。 AI

影响强调了大型语言模型需要发展超越纯粹语言流利度的更深层次的文化和社会语用学理解。

排序理由这是一篇介绍大型语言模型新基准测试的研究论文。

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

报道来源 [1]

arXiv cs.CL TIER_1 English(EN) · Tanvir Ahmed Sijan, S. M Golam Rifat, Pankaj Chowdhury Partha, Md. Tanjeed Islam, Md. Musfique Anwar · 2026-05-04 04:00

BanglaSocialBench: A Benchmark for Evaluating Sociopragmatic and Cultural Alignment of LLMs in Bangladeshi Social Interaction

arXiv:2603.15949v3 Announce Type: replace Abstract: Large Language Models have demonstrated strong multilingual fluency, yet fluency alone does not guarantee socially appropriate language use. In high-context languages, communicative competence requires sensitivity to social hier…

报道来源 [1]

BanglaSocialBench: A Benchmark for Evaluating Sociopragmatic and Cultural Alignment of LLMs in Bangladeshi Social Interaction

相关实体

相关话题