研究人员开发了一种名为“影响引导响应重写”的新方法,以更有效地修改语言模型的行为。该技术使用影响函数识别有影响力的训练数据点,然后替换它们的响应,与传统的重加权方法相比,可以产生更强大、更持久的行为转变。在四个开源LLM上的实验表明,这种重写方法可以产生更显著的双向变化,即使是针对安全相关的行为,也表明有影响力的样本比以前理解的具有更大的干预潜力。 AI
影响 这项研究可能带来对LLM行为更精确的控制以及改进训练数据评估方法。
排序理由 该集群包含一篇学术论文,详细介绍了一种影响语言模型行为的新方法。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- epistemic abstention
- From Reweighting to Rewriting: Unlocking the Intervention Effects of Influential Samples in Training Data Attribution
- Hugging Face
- Influence Functions
- Language Models
- Training Data Attribution
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →