Lift-Bench

新的LIFT框架旨在提升语言模型的指令遵循能力

研究人员推出LIFT，一个用于评估和训练语言模型指令遵循能力的新框架。LIFT包含Lift-Bench，一个旨在通过使用作用域约束并区分主要任务和指令遵循目标来缓解奖励欺骗的基准。该框架还包含Lift-Train，一个比现有方法更不容易受到奖励欺骗的训练对应部分。初步实验表明，当前前沿模型在Lift-Bench更具挑战性的方面表现不佳，并且公开可用的基准和训练数据旨在提供对约束密度和可访问性的更精细控制。