PulseAugur
实时 05:55:50
English(EN) ALIGNBEAM : Inference-Time Alignment Transfer via Cross-Vocabulary Logit Mixing

ALIGNBEAM 方法在推理时迁移大语言模型安全对齐

研究人员开发了ALIGNBEAM,一种无需改变权重即可增强大语言模型安全性的新方法。该技术通过实现即使在词汇不同的模型之间也能进行对齐迁移,解决了领域微调会降低模型安全性的问题。ALIGNBEAM 在推理时运行,使用一个小型大语言模型裁判从多个候选者中选择最安全的续写,从而在保持任务准确性和实际推理开销的同时,提高了在对抗性基准测试上的拒绝率。 AI

影响 无需重新训练即可实现跨家族大语言模型安全对齐,可能提高已部署模型的安全性。

排序理由 该集群包含一篇详细介绍大语言模型安全新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Vinay Kumar Sankarapu ·

    ALIGNBEAM:通过跨词汇logit混合实现推理时对齐迁移

    Domain fine-tuning degrades the safety of large language models: fine-tuned specialists readily comply with harmful prompts framed in domain language. Existing inference-time defenses that mix logits from a safe anchor model require both models to share a vocabulary, which rules …