Houcheng Jiang

新框架通过减少弱模型中的噪声来增强 LLM 训练

研究人员开发了一个名为对比弱到强泛化（ConG）的新框架，以改进大型语言模型的训练。ConG 解决了现有弱到强泛化方法中的局限性，这些方法可能受到弱模型中噪声和偏差的阻碍。通过利用隐式奖励和对比解码，ConG 生成了更高质量的样本，从而实现了更可靠的能力转移和更强的鲁棒性。这种方法在各种模型家族中都显示出了一致的改进，为推进 LLM 训练提供了一条有前途的途径。