StreamHear

StreamHear 管道增强了领域自适应流式语音识别

研究人员开发了 StreamHear，一个新颖的半监督学习管道，旨在提高流式自动语音识别 (ASR) 在领域偏移音频上的性能。该系统通过首先在可用的标记数据上微调一个离线变换器教师模型来适应预训练的流式学生模型。然后，该教师模型为未标记的音频生成伪标签，用于微调学生模型。此外，StreamHear 还包含一个重新对齐步骤，使用 ASR 假设锚点来优化词语位置，在各种数据集上均显示出持续的改进。