实体
Lanpei Li
Lanpei Li
PulseAugur coverage of Lanpei Li — every cluster mentioning Lanpei Li across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
提出用于云边资源管理的LLM意图编译器
研究人员提出了一种在新方法,用于在云边系统中进行资源管理的大型语言模型(LLM)。该研究建议不将LLM直接嵌入快节奏的控制循环中,而是采用一个持续指令调优的意图编译器,该编译器运行在一个独立的、快速的战术控制器之上。这种方法旨在通过将意图编译视为一个序列调优问题来减轻与LLM推理延迟和幻觉相关的风险。初步结果表明,重放存储的示例几乎可以防止早期意图的灾难性遗忘,使调优后的编译器在性能上可与更简单的翻译器相媲美,同时对意图措辞的变化更具弹性。
-
新的STABLE优化器解决了持续学习中的灾难性遗忘问题
研究人员开发了STABLE,一种新的对偶优化器,旨在解决持续学习中的灾难性遗忘问题。该优化器自适应地控制参数漂移,在不牺牲可塑性的情况下确保稳定性。实验表明,STABLE与PEFT基线结合使用时,在单模态和多模态任务上均能达到或超过现有的专业持续学习方法的性能,甚至在后者中保留了零样本迁移能力。