Maswao

新框架自动创建SASL手语数据集

研究人员开发了一个新颖的框架，用于在最少人工干预的情况下自动收集和准备手语数据集，并以南非手语（SASL）为例。Maswao数据集是通过收集公共资源中的视频内容、使用ASR工具转录伴随音频以及通过梯度下降识别句子边界来创建的。对该数据集进行手语到文本翻译的基准测试表明，Transformer模型优于循环神经网络，达到了特定的BLEU、ChrF和ROUGE-L分数，表明该任务具有进一步研究的潜力。