LLM-as-a-Tutor

LLM-as-a-Tutor 框架增强了强化学习的指令遵循能力

研究人员开发了一个名为 LLM-as-a-Tutor 的新框架，以改进强化学习的指令遵循能力。该系统通过让一个 LLM 同时充当考官和生成器来动态调整训练提示的难度。考官识别对当前策略而言过于简单的提示，生成器则添加约束以增加难度，从而创建一个自校准的训练信号。这种方法解决了提示难度与策略能力之间的不匹配问题，在复杂的指令遵循基准测试中表现优于现有方法。