PulseAugur
实时 08:40:49
English(EN) Encode Once, Decode Never: Reusing Audio LM Internals for Efficient Temporal Localization

新方法将音频 LM 时间定位速度提升 50 倍

研究人员为音频语言模型(LMs)开发了一种名为“内部帧级重用”的新方法,该方法显著加快了时间定位任务的速度。这种方法绕过了将时间戳生成为文本标记的缓慢且易出错的过程。相反,它训练音频 LM 直接使用其内部帧级表示来进行定位。该方法在单词定位和说话人分离等任务上,尤其是在处理持续时间超出分布的音频时,已证明推理速度提高了 50 倍以上,并且准确性有所提高。 AI

影响 加速音频处理任务的推理,从而实现更高效的实时应用。

排序理由 详细介绍音频语言模型新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新方法将音频 LM 时间定位速度提升 50 倍

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Joseph An, Phillip Keung, Jiaqi Wang, Orevaoghene Ahia, Noah A. Smith ·

    一次编码,永不解码:重用音频LM内部机制以实现高效的时间定位

    arXiv:2602.10230v2 Announce Type: replace Abstract: Audio language models process input audio into rich frame-level representations, but the standard approach to temporal localization generates timestamps as sequences of text tokens, which discards the frame-level representations…