PulseAugur
实时 13:08:20
English(EN) Toward Signing Activity Projection in Sign Language Interaction

AI模型适配手语轮次预测

研究人员正在探索将语音活动预测(VAP)模型应用于预测手语交互中的轮次切换。一项使用公共DGS语料库的初步研究,利用手部和面部区域的姿态数据,将VAP架构适配到手语中。虽然该模型在预测SHIFT/HOLD动作方面显示出潜力,尤其是在结合手部线索时,但精确预测SHIFT仍然具有挑战性,这表明需要对手语特定的事件定义进行研究。 AI

影响 这项研究可能为手语用户带来更直观的人机交互,提高AI系统的可访问性。

排序理由 学术论文,展示了一项将VAP架构适配到手语交互的初步迁移研究。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.CL TIER_1 English(EN) · Kotaro Funakoshi ·

    面向手语交互中的签约活动预测

    Social robots must interact robustly not only with users assumed by speech-centered systems but also with diverse users whose communication relies on different modalities, e.g., sign language. One important capability gap is predictive turn-taking with signing users. Although Voi…