研究人员开发了一种方法来探究和理解大型语言模型(LLMs)内部的偏好表征。通过在 Gemma-3-27B 和 Qwen-3.5-122B 等模型的残差流激活上训练线性探针,他们可以预测甚至因果性地影响模型在不同任务和输出之间的选择。这项研究表明,一些偏好信息可以在不同提示的角色之间共享,即使是那些具有相反偏好的角色,这也暗示了模型在表征偏好方面具有一定程度的内部一致性。 AI
影响 通过理解偏好在内部的表征方式,这项研究可能带来更可控和可预测的大型语言模型行为。
排序理由 该集群包含一篇详细介绍大型语言模型行为新研究的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →