研究人员开发了一种新的微调方法，该方法包含一个可微分的能量代理模型，用于优化大型语言模型（LLM）的性能和碳排放。该方法旨在在推理过程中以最小或零碳成本实现任务准确性，而推理是LLM整体碳足迹的主要贡献者。在Gemma-2 2B、Llama-3.1 8B和Qwen-2.5 14B模型上针对特定MMLU科目进行的实验表明，碳感知微调充当了任务相关的正则化器，其有效性因任务结构而异。 AI
影响 这项研究可能带来更节能的LLM，从而降低AI部署的运营成本和环境影响。
排序理由 该集群包含一篇详细介绍LLM新研究方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
