SpeechCOMET

语音翻译评估指标未能捕捉语音细微差别

一篇新的研究论文强调了当前语音翻译评估指标的局限性，这些指标未能考虑到诸如说话人性别和韵律等语音特有的细微差别。该研究引入了 SpeechCOMET，这是一系列旨在整合语音编码器的新质量估计模型，并评估了一个 SpeechLLM 作为评判者。虽然这些模型在通用质量估计方面与基于文本的指标相当，但由于编码器中的特征保留问题、模型忽略语音信号以及训练数据不足，它们在一致评估语音特有现象方面存在困难。