YallaMorph

新的YallaMorph基准测试LLM的阿拉伯语形态生成能力

研究人员推出了YallaMorph，这是一个旨在评估大型语言模型在阿拉伯语形态生成能力方面表现的新基准。该基准解决了LLM虽然能生成流利的阿拉伯语，但在准确的形态句法控制方面常常遇到困难的挑战。YallaMorph涵盖了广泛的阿拉伯语形式，包括动词、名词、形容词及其附着和无效配置，总计超过60万条。初步评估表明，对于当前的LLM而言，阿拉伯语形态生成仍然是一项艰巨的任务，尤其是在处理复杂或不太常见的形式时。