Kwaipilot

Kwai AI的SRPO以10倍的训练步数实现了DeepSeek-R1-Zero的性能

来自快手Kwaipilot团队的研究人员开发了一个名为SRPO的新型强化学习框架，旨在提高大型语言模型的效率和性能。该新方法通过采用两阶段训练过程，解决了标准GRPO在样本效率和跨域优化冲突等方面的局限性。SRPO在数学和代码基准测试中展示了最先进的性能，达到了DeepSeek-R1-Zero的水平，同时仅需十分之一的训练步数。