German Sign Language
PulseAugur coverage of German Sign Language — every cluster mentioning German Sign Language across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
新AI模型实现手语直接翻译,综述强调进展与挑战 · 跟踪2个来源
研究人员开发了一种直接翻译手语的新方法,通过调整回译技术来解决平行数据稀缺的问题。该方法使用基于Qwen3的模型联合翻译文本到手语和手语到手语,无需中间口语文本。在美国手语、中国手语和德国手语上的实验表明,与级联系统相比,翻译准确性和运动误差均有所改善。另外,对机器翻译手语的全面综述强调了姿态估计和Transformer架构的进步,同时也强调了需要更大的数据集、更好的评估指标以及涉及聋人群体的伦理考量。
-
新数据集和模型推动手语识别和翻译发展
研究人员开发了手语识别和翻译的新方法。一种方法使用深度学习流程,结合视频MAE视频Transformer将手语手势分类为英语单词,并使用Meta AI的NLLB-200模型将这些单词翻译成印地语、泰卢固语和孟加拉语等印度语言。另一项开发是SignNet-1M数据集,该数据集旨在通过使用3D高斯溅射和扩散模型等技术合成视角、背景和 the signer identity 的真实变化,来提高手语模型的鲁棒性。该数据集及其相关的基准测试旨在…
-
新的LLM和编码方法提升手语翻译能力
研究人员正在探索利用大型语言模型(LLM)和先进的编码技术来改进手语翻译(SLT)的新方法。一种方法使用GPT-4o生成释义的目标句子,以增强训练数据,提高翻译质量,尤其是在词汇量稀疏的语言中。另一种方法FEA-SLT将面部表情作为语义锚点,以解决手动手语配置中的歧义,在无词汇方法中取得了最先进的成果。此外,SAGE框架引入了段感知视觉标记,通过缩短输入序列长度来创建更高效、可扩展的无词汇SLT模型。
-
使用合成数据开发的直接手语翻译模型
研究人员开发了一种新颖的直接翻译不同手语的方法,填补了当前手语技术的空白。他们的方法利用反向翻译创建合成平行语料库,从而能够训练一个模型同时进行文本到手语和手语到手语的翻译。这种直接方法在准确性和速度上显著优于级联系统,有望改善聋哑和听障人士之间的跨语言交流。