PulseAugur
实时 11:28:27
English(EN) Gradient-free Task-Conditioned Retrieval for On-Device In-Context Learning

新的CoRA框架实现了无梯度的设备端AI检索

研究人员开发了一种新的无梯度框架,称为条件检索对齐(CoRA),用于设备端上下文学习。CoRA通过将候选输入表示与派生自输出的条件空间对齐,将一个冻结的编码器转换为任务条件检索器。这种方法无需检索器微调或反向传播即可实现有效的检索,并且已在Llama 3.2 1B和Qwen3.5 2B等模型上,在各种文本和多模态基准测试中得到验证,甚至在Raspberry Pi 5上也能运行。 AI

影响 通过降低检索的计算要求,实现了更高效、更易于访问的设备端AI应用。

排序理由 该集群包含一篇详细介绍AI检索新框架的学术论文。

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

新的CoRA框架实现了无梯度的设备端AI检索

报道来源 [2]

  1. arXiv cs.CL TIER_1 English(EN) · Xinyu Luo, Hui Liu, Yihua Shao, Junyi Yang, Arindam Basu, Haoliang Li ·

    面向设备端上下文学习的无梯度任务条件检索

    arXiv:2607.27766v1 Announce Type: new Abstract: On-device in-context learning (ICL) relies on pre-inference retrieval to select demonstrations for useful context before downstream model inference. This retrieval must exploit task-specific information while operating over local me…

  2. arXiv cs.IR (Information Retrieval) TIER_1 English(EN) · Haoliang Li ·

    面向设备端上下文学习的无梯度任务条件检索

    On-device in-context learning (ICL) relies on pre-inference retrieval to select demonstrations for useful context before downstream model inference. This retrieval must exploit task-specific information while operating over local memories under limited computation, memory, and da…