研究人员开发了PoliticsBench,这是一个旨在评估大型语言模型政治价值观和偏见的新基准。该基准利用多轮角色扮演场景来评估LLM如何处理竞争性压力和做出决策,揭示出比传统静态提示更细致的价值观表达。研究发现,互动设置显著增强了价值观维度和立场承诺的激活,这表明当前的评估方法可能无法完全捕捉LLM的政治行为。 AI
影响 提供了一种更细致的方法来评估LLM的政治偏见,这对于理解其社会影响至关重要。
排序理由 学术论文,介绍了一个用于LLM评估的新基准。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →