研究人员提出了一种新的方法来评估和改进检索增强生成(RAG)系统中的主题级公平性。当前的方法通常会聚合所有查询的公平性指标,这可能会掩盖特定主题内的显著差异。所提出的方法为每个主题单独调整重排器,使用来自RAG系统自身生成输出的偏好对来指导调整。该技术在RoMQA和TREC Fair Ranking等基准数据集上,在保持准确性的同时,显著减少了主题级差异。 AI
影响 解决了AI公平性评估中的一个关键差距,有望在各种应用中实现更公平的AI系统。
排序理由 学术论文,详细介绍了评估和改进AI模型公平性的一种新方法。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →