研究人员开发了一种新算法,可有效估计语言模型的上下文归因。该方法将所需的模型评估次数从 n 大幅减少到约 sqrt(log(1/epsilon))/epsilon,同时保持较低的错误率。该算法利用应用于算术电路和反向传播的草图技术,改进了需要更多评估次数的现有方法。这项工作还包括一个理论下界,以证明所提出方法的最佳性。 AI
影响 这项研究提供了一种更有效的方法来理解提示的特定部分如何影响语言模型的输出,从而有可能提高模型的解释性和调试能力。
排序理由 该条目在一篇研究论文中描述了一种用于语言模型上下文归因的新算法和理论界限。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- Chen
- Duman Keles
- Gunn
- Halikias
- Hans Georg Amsel
- Hugging Face
- Musco
- SIAM Journal on Matrix Analysis and Applications
- Sketching Language Models for Context Attribution
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →