实体
Cartridges
Cartridges
PulseAugur coverage of Cartridges — every cluster mentioning Cartridges across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新研究比较LLM知识注入方法
一篇新研究论文探讨了大语言模型(LLM)在预训练数据之外访问新信息的方法。该研究在五个知识密集型基准测试中比较了基于表示(KV-cache)和基于参数(微调)的适应技术。结果表明,基于KV-cache的方法,特别是“Cartridges”,在各种存储预算下提供了更高的准确性,在Oracle设置下比参数方法高出10个百分点,并在多文档检索场景中显著优于参数方法。然而,Cartridges与完全微调一样,可能导致在控制基准测试中出现灾难性遗忘。
-
AI研究重新定义持续学习,超越记忆关注适应性
近期研究论文探讨了AI模型中持续学习的复杂性,超越了简单的上下文管理,以解决模型能力随着世界变化而产生的根本性提升。研究调查了模型如何适应新领域和漂移数据,一些方法在快速适应方面表现出色,但在未来任务上表现下降,而另一些方法则更稳定地积累知识,但难以处理过时事实。一个突出的关键挑战是,当前的持续学习方法倾向于隐式地假设未来数据知识,而不是真正地无关紧要,这导致需要新的方法来平衡保留和适应性。