Gangqinpu

DuET Transformer 模型增强了钢琴演奏到乐谱的转录

研究人员开发了 DuET，一种新颖的双编码器 Transformer 模型，用于将钢琴演奏转录成乐谱。该模型通过使用音符编码器和帧编码器之间的双向交叉注意力，联合学习音符级转录和帧级节拍跟踪。DuET 还引入了 TimeRoPE 和 Time-Pitch 旋转位置编码，以建立共享的演奏时间参考并编码时间和音高关系。在 ASAP 和 Gangqinpu 数据集上的评估表明，DuET 提高了乐谱的时间精度和记谱时长，显著降低了 Gangq…