PulseAugur
实时 09:23:22
English(EN) Bridging the Gap Between Semantics and Reconstruction:Unifying Sign Language Translation and Production

新框架统一手语翻译与生成

研究人员开发了Uni-SLTP,一个旨在将手语翻译(SLT)和手语生成(SLP)统一在单一系统中的新颖框架。与之前主要将手语映射到文本的SLU任务不同,这种方法解决了手语动作和文本之间双向映射的挑战。Uni-SLTP利用共享的手语分词器将手语序列转换为捕获语义和重建信息的离散标记,并使用统一的自回归模型进行生成。在公开数据集上的实验表明,Uni-SLTP在保持SLT竞争性性能的同时,实现了高运动精度(SLP)。 AI

影响 这项研究可能带来更集成、更准确的手语交流工具,从而提高可访问性。

排序理由 关于手语处理新框架的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架统一手语翻译与生成

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Xiao Liu, Shiwei Gan, Yafeng Yin, Jiaxin Yin, Bowen Guo, Yaqi Sun, Zhiwei Jiang, Lei Xie ·

    弥合语义与重建之间的鸿沟:统一手语翻译与生成

    arXiv:2608.09045v1 Announce Type: cross Abstract: Recent advances in sign language (SL) research have shown a trend toward unifying multiple sign language understanding (SLU) subtasks, such as isolated sign language recognition (ISLR), continuous sign language recognition (CSLR),…