Mateusz Modrzejewski

新的探针揭示了AI评判模型如何评估生成的音乐

研究人员开发了四种探针，以更好地理解音频-语言模型如何评估生成的音乐。这些探针测试音乐、文本提示或指令措辞的哪些方面会影响模型的评分。在MusicEval和SongEval数据集上进行测试时，探针显示模型在对齐评分方面通常比音频本身更依赖文本提示。此外，一些评判者的质量得分与专家对齐评分的相关性高于与质量评分的相关性，并且成对判断有时会受到片段在对中位置的影响，而不是其实际质量。该研究建议使用这些探针来提高音乐评估评判者的透明度和可靠性。