PulseAugur
实时 08:54:44
English(EN) CALM-AH: An ABAW11-Calibrated Multimodal Ensemble with Reliability-Gated Multi-Expert Consensus for Video-Level Ambivalence and Hesitancy Recognition

新AI模型CALM-AH改进了视频中矛盾和犹豫的识别能力

研究人员开发了CALM-AH,这是一个多模态集成系统,旨在识别视频访谈中的矛盾和犹豫。该系统整合了文本、声学、视觉和行为统计特征,采用了一种新颖的可靠性门控多专家共识(RG-MEC)方法。该方法结合了初始预测和三个校正专家,只有当所有校正专家一致同意替代类别时,才会覆盖默认预测,从而限制孤立的错误,同时允许一致的双向校正。CALM-AH在ABAW11数据集上取得了0.7525的Macro-F1分数,而完整的RG-MEC系统达到了0.7771。 AI

影响 这项研究引入了一种新颖的集成方法,用于识别视频中细微的人类情绪状态,有望改进人机交互和分析工具。

排序理由 这是一篇详细介绍新模型和特定识别任务方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新AI模型CALM-AH改进了视频中矛盾和犹豫的识别能力

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Wenzhuo Sun, Mingjian Liang, Richard Attfield, Zongyuan Ge, Xuelian Cheng, Pamela Carreno-Medrano ·

    CALM-AH:一个经过ABAW11校准的多模态集成,采用可靠性门控多专家共识进行视频级矛盾和犹豫识别

    arXiv:2607.29310v1 Announce Type: new Abstract: Ambivalence and hesitancy (A/H) are subtle behavioural states that may be expressed through language, voice, facial activity, and other non-verbal cues. The ABAW11 A/H Video Recognition Challenge asks systems to assign a binary A/H …