PulseAugur
实时 08:53:45

AViS-Mamba架构通过自适应地利用视觉上下文引导音频来增强暴力检测能力

研究人员开发了AViS-Mamba,这是一种新颖的视听架构,旨在改进视频中的暴力检测。这个基于Mamba的模型具有一个独特的机制,其中视觉流直接影响音频流的时间动态,从而允许根据视觉上下文自适应地依赖音频线索。该系统在NTU-CCTV和DVD基准测试中均取得了最先进的性能,准确率分别为88.59%和75.74%。事实证明,AViS-Mamba的自适应条件比固定路由更有效,尤其是在音频质量下降或缺失的情况下。 AI

影响 这项研究通过更好地整合多模态感官数据,可能带来更强大、更准确的暴力检测系统。

排序理由 该集群包含一篇详细介绍新模型架构及其在基准测试中性能的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

AViS-Mamba架构通过自适应地利用视觉上下文引导音频来增强暴力检测能力

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Damith Chamalke Senadeera, Dimitrios Kollias, Gregory Slabaugh ·

    AViS-Mamba: Adaptive Visual Steering of Audio State-Space Dynamics for Violence Detection

    arXiv:2604.03329v2 Announce Type: replace-cross Abstract: Automatic violence detection from video is challenging because violent interactions may be distant, occluded, or only partially visible. Audio can provide complementary evidence for violent events that are difficult to rec…