研究人员开发了一种名为 Merge and Branch (M&B) 的新方法,以提高大型语言模型 (LLM) 在推荐系统上的监督微调效率。M&B 将历史项目信息压缩成更少的 token,并使用树状结构从单个编码历史中预测多个目标推荐。这种方法结合了用于高效计算的 tree FlashAttention,显著提高了训练和解码效率,同时优于现有的推荐基线。 AI
影响 该方法可以显著降低训练推荐模型的计算成本,从而实现更高效的开发和部署。
排序理由 该集群包含一篇详细介绍 LLM 微调新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →