PulseAugur
中
实时 19:22:38
实体 long-context teacher model

long-context teacher model

PulseAugur coverage of long-context teacher model — every cluster mentioning long-context teacher model across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_238351 ·

    通过序列级蒸馏改进小型大语言模型在法律摘要中的表现

    研究人员开发了一种序列级蒸馏方法，以增强小型大语言模型（LLMs）总结长篇法律意见的能力。这种无需标注的技术使用长上下文教师模型，与在专家撰写的摘要上进行微调相比，显著提高了论点显著性覆盖率。该方法被证明具有高度的数据效率，仅用约10个训练摘要即可获得显著的提升，并表明仅摘要蒸馏就足以实现这些改进。