PulseAugur
实时 09:50:49
Deutsch(DE) GradShield: Alignment Preserving Finetuning

GradShield 过滤有害数据以在微调后保持 LLM 对齐

研究人员开发了 GradShield,一种防止大型语言模型在微调后发生错位的新方法。该技术通过计算每个数据点的微调隐含有害分数 (FIHS) 来识别和删除有害数据点,防止它们破坏模型的对齐。实验表明,GradShield 在将攻击成功率保持在 6% 以下的同时,能有效维持模型效用,其性能优于现有的基线方法。 AI

影响 该方法通过防止引入有害行为,可以实现对微调后 LLM 的更安全部署。

排序理由 该集群包含一篇详细介绍 LLM 安全新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.CL TIER_1 Deutsch(DE) · Zhanhao Hu, Xiao Huang, Patrick Mendoza, Emad A. Alghamdi, Basel Alomair, Raluca Ada Popa, David Wagner ·

    GradShield: 对齐保留微调

    arXiv:2605.14194v2 Announce Type: replace Abstract: Large Language Models (LLMs) pose a significant risk of safety misalignment after finetuning, as models can be compromised by both explicitly and implicitly harmful data. Even some seemingly benign data can inadvertently steer a…