PulseAugur
实时 07:15:59
English(EN) TagSpeech: End-to-End Multi-Speaker ASR and Diarization with Fine-Grained Temporal Grounding

新的LLM框架TagSpeech增强了多说话人ASR和说话人分割

研究人员推出TagSpeech,一个新颖的端到端框架,用于联合自动语音识别(ASR)和说话人分割。这个基于LLM的系统利用时间锚点定位来精确识别“谁在何时说了什么”。TagSpeech采用参数高效的训练方法,冻结LLM主干,仅训练轻量级投影器,从而以较低的计算成本获得强大的性能。在AMI和AliMeeting基准上的实验表明,TagSpeech在复杂语音重叠场景下优于现有的端到端基线,包括Qwen Omni和Gemini。 AI

影响 该框架可以提高多说话人音频转录的准确性和效率,从而惠及会议摘要和呼叫中心分析等应用。

排序理由 该集群描述了一篇关于用于ASR和说话人分割的新型基于LLM的框架的最新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的LLM框架TagSpeech增强了多说话人ASR和说话人分割

报道来源 [1]

  1. arXiv cs.CL TIER_1 English(EN) · Mingyue Huo, Yiwen Shao, Yuheng Zhang ·

    TagSpeech: End-to-End Multi-Speaker ASR and Diarization with Fine-Grained Temporal Grounding

    arXiv:2601.06896v2 Announce Type: replace-cross Abstract: We present TagSpeech, a unified LLM-based framework that utilizes Temporal Anchor Grounding for joint multi-speaker ASR and diarization. The framework is built on two key designs: (1) decoupled semantic and speaker streams…