PulseAugur
实时 11:10:07
English(EN) Parallelized Autoregressive Decoding for Omni-Modal Dense Video Captioning

新框架支持并行视频字幕生成,效率更高

研究人员开发了一种新颖的并行自回归框架,旨在提高密集视频字幕生成的效率和性能。该新方法重构了因果依赖图,通过同时解码具有弱跨事件依赖性的词元来实现无损并行生成,同时为事件内紧密耦合的词元保持顺序解码。该框架包含一个用于事件间因果关系的潜在全局规划机制和一个用于平衡局部和全局意识的事件分解并行解码机制,在各种基准测试中均显示出显著的效率和性能优势。 AI

影响 这项研究通过提高用于字幕生成的大型语言模型的效率,可能显著加快视频分析和生成任务的速度。

排序理由 这是一篇详细介绍特定AI任务新技术方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架支持并行视频字幕生成,效率更高

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Wenzheng Zeng, Siyi Jiao, Chen Gao, Hwee Tou Ng, Mike Zheng Shou ·

    Parallelized Autoregressive Decoding for Omni-Modal Dense Video Captioning

    arXiv:2607.02963v1 Announce Type: cross Abstract: Dense video captioning aims to generate temporally grounded descriptions of video events, benefiting both event-level video understanding and generation. In this domain, autoregressive video large language models have emerged as a…