RoPoLL

新的RoPoLL方法增强了大语言模型（LLM）评估的鲁棒性

研究人员推出了一种名为RoPoLL的新方法，以提高大语言模型（LLM）评估的鲁棒性。传统的大语言模型（LLM）评判员小组虽然实用，但容易受到模式崩溃或谄媚等偏见的影响，导致误差无界。RoPoLL通过用鲁棒的均值估计器（特别是几何中位数）替换标准的聚合函数来解决这个问题，该估计器具有最佳的失效点，即使在评判员严重受污染的情况下也能保持准确性。实验表明，RoPoLL的性能显著优于现有方法，在一个关键基准测试中，即使是一个小型RoPoLL委…