一篇新的 arXiv 论文研究了如何通过少样本微调(例如 LoRA)来个性化 AI 助手,这可能会降低它们拒绝超出范围输入的能. 研究发现,这种个性化在保持对已学习命令的准确性的同时,在多个基准测试中显著降低了超出范围拒绝的性能. 研究人员提出了一个简单的修复方法:使用马氏距离为拒绝评分,而不是标准的 softmax 置信度,这在无需额外训练的情况下恢复了大部分丢失的质量. AI
影响 可能需要重新评估个性化技术,以维持 AI 助手的可信度和强大的超出范围拒绝能力.
排序理由 关于 AI 模型行为和评估的学术论文. [lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →