研究人员开发了一种名为选择性再生解码(SRD)的新型推理时解码方法,该方法提高了大型语言模型的推理能力。与之前要么保留整个候选轨迹要么丢弃的旧方法不同,SRD允许进行片段级别的干预,保留部分有希望的候选轨迹中有用的前缀,同时优化或丢弃质量下降的后缀。这种方法在样本效率方面带来了可证明的提升,并提高了预期的轨迹质量,在低计算量场景下优于推测性拒绝。 AI
影响 该方法有望提高大型语言模型更高效、更高质量的推理能力,从而可能降低复杂任务的计算成本。
排序理由 详细介绍大型语言模型推理新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →