Nous Research 微调了阿里巴巴的 Qwen 模型,显著减少了宣传性内容的生成。在使用了 5300 万个 token 进行训练后,该模型的宣传性输出从 22% 下降到 0.9%。Nous Research 认为这表明开源模型的对齐比之前认为的更容易改变,尽管这些发现仍有待独立验证。 AI
影响 展示了一种减少开源模型中宣传性内容的方法,可能提高安全性和可信度。
排序理由 该条目描述了对现有模型的微调工作及其结果,属于研究范畴。[lever_c_demoted from research: ic=1 ai=1.0]
在 Mastodon — mastodon.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →