研究人员开发了从人类成对比较中推断排名的统计新方法,特别关注大型语言模型。这些方法通过在Bradley-Terry模型中采用差分隐私技术,确保个人偏好数据的隐私性。该方法为分数和排名的估计误差提供了有限样本界限和渐近有效的置信区间,并使用自举程序进行同步排名推断。这些技术被应用于根据创意写作能力对大型语言模型进行排名。 AI
影响 增强了基于人类偏好评估和比较大型语言模型的隐私保护方法。
排序理由 该集群包含一篇学术论文,详细介绍了具有差分隐私的大型语言模型排名的统计新方法。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Bradley-Terry model
- Euclidean
- Gaussian-Laplace calibration
- Hugging Face
- human pairwise comparisons
- large language models
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →