E-CONAN-2

新的E-CONAN基准旨在推进阿拉伯语自然语言推理

研究人员推出了E-CONAN，这是一套旨在提高阿拉伯语自然语言推理能力的新基准。这些基准由两个数据集E-CONAN-2和E-CONAN-3组成，它们是从自动翻译、人工验证、手工制作和新闻标题句子对的混合体中创建的。在零样本分类设置中，使用这些基准评估了九个最先进的多语言预训练模型和五个大型语言模型，结果表明E-CONAN在评估和微调模型泛化能力方面具有价值。