Yekaterina Yegorova

新研究解决语音模型效率和适应性问题

研究人员开发了新方法来提高语音处理模型的效率和性能。FastSLM引入了分层时间抽象器，可在保留关键声学细节的同时显著压缩音频数据，以更少的资源超越了最先进的模型。SALSA提供了一种轻量级的语音感知大型语言模型的适应技术，通过学习特定的引导向量来增强其对多样化和域外语音的泛化能力。此外，一种新颖的训练优化方法允许对语音模型的性能和计算复杂度进行联合调整，从而无需事后剪枝即可实现动态尺寸优化。