KoLingProbe

新基准和检测器改进了韩语LLM生成文本的检测

研究人员开发了一种检测大型语言模型（LLM）在韩语中生成文本的新方法。现有方法通常依赖于表面线索，并且主要关注英语，导致对韩语的性能估计不准确。为了解决这个问题，创建了一个名为KoLing的新偏差控制基准，该基准包含超过50,000个实例，并侧重于语义内容而非表面特征。此外，还提出了一种名为KoLingProbe的基于语言学的检测器，该检测器模拟了韩语特有的属性，并与现有基线相比，在对抗性攻击方面表现出卓越的性能和鲁棒性。