研究人员开发了EASE-TTT，一种用于改进小型语言模型长上下文问答能力的新型框架。该方法将检索到的证据片段与注意力机制对齐，以指导模型适应。在六个LongBench QA任务上的实验表明，EASE-TTT的性能优于现有的检索和测试时训练方法。 AI
影响 增强了小型语言模型在复杂、长上下文问答任务中的能力。
排序理由 该集群包含一篇学术论文，详细介绍了一种改进语言模型在特定任务上性能的新方法。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
新的EASE-TTT框架提升小型LLM的长上下文问答能力
报道来源 [2]
-
EASE-TTT：面向长上下文问答的证据对齐选择性测试时训练
arXiv:2606.06906v1 Announce Type: cross Abstract: Long-context question answering (QA) remains challenging for smaller language models even when answer-bearing evidence is already present in the input. Existing within-context retrieval methods localize and expose candidate eviden…
-
EASE-TTT：面向长上下文问答的证据对齐选择性测试时训练
Long-context question answering (QA) remains challenging for smaller language models even when answer-bearing evidence is already present in the input. Existing within-context retrieval methods localize and expose candidate evidence chunks for the question, but they stop at input…