PulseAugur
中
实时 13:26:33
实体 Vignesh Prabhakar

Vignesh Prabhakar

PulseAugur coverage of Vignesh Prabhakar — every cluster mentioning Vignesh Prabhakar across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
0
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_233362 ·

    新的蒸馏方法提升大语言模型训练效率

    研究人员开发了新的在线蒸馏（OPD）方法来改进语言模型的训练。其中一种方法，教师门控在线蒸馏（TGOPD），在应用监督之前，在提示级别验证教师的可靠性，在各种领域和规模上均优于普通OPD。另一种方法将离线教师优化与在线学生蒸馏相结合，显示出显著的收益，尤其是在分布变化下，并取得了与更大模型相媲美的性能。