MT-EmotiDDAMFN

AI系统在视频分析中提升矛盾和犹豫识别能力 · 跟踪8个来源

研究人员开发了识别视频中矛盾和犹豫的先进方法，参加了第11届ABAW挑战赛。其中一种方法，HSEmotion团队的系统，利用多任务学习，结合冻结的轻量级面部提取器和后处理技术来预测效价、唤醒度、面部表情和动作单元。另一个系统SVF-CR采用同步视觉-面部交叉精炼框架进行多模态证据融合。第三种方法侧重于简单特征和诚实校准，引入“ASR擦除时间”来捕捉犹豫停顿，并使用称为情感标记融合的可靠性门控。