研究人员开发了自适应自知识蒸馏(ASKD),一种用于压缩大型AI模型的新颖框架。该方法在训练过程中动态减少对教师模型预测的依赖,鼓励学生模型发展独立推理能力。ASKD被应用于将Whisper语音识别模型蒸馏成一个更高效的版本ASKD-Whisper,其推理延迟降低了5倍,词错误率比其教师模型低1.07%。 AI
影响 该技术可以实现大型ASR模型在资源受限设备上更高效的部署。
排序理由 该集群包含一篇详细介绍模型压缩新颖方法及其在ASR模型应用的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →