Khmer PFGen-Bench

为高棉语生成开发新的无评委基准

研究人员开发了Khmer PFGen-Bench，这是一个新颖的基准，旨在评估高棉语（一种低资源语言）的开放式文本生成。与许多依赖大型语言模型（LLM）评委的现有基准不同，这个新基准采用了源自日本基准的无评委方法。它利用关键词规则和n-gram统计，并使用各种后训练模型生成的参考文本来确保有效性和多样性。研究发现，混合不同的模型家族可以增加参考文本的多样性，并且该基准的排名稳定且与人类评分一致，为其他低资源语言的类似基准提供了一个模板。