PulseAugur
实时 10:23:08
English(EN) Adaptive Physical-Facial Representation Fusion via Subject-Invariant Cross-Modal Prompt Tuning for Video-Based Emotion Recognition

新框架融合面部和生理信号以提升情感识别能力

研究人员开发了一个新的视频情感识别框架,该框架将面部表情与远程光电容积脉搏图(rPPG)的生理信号相结合。他们的方法使用提示调优将rPPG信息整合到Vision Transformer中,同时保留预训练的面部表征。此外,还采用了解耦适配器来分离主体共享和主体特异性组件,从而增强了跨不同个体的泛化能力。 AI

影响 引入了一种新颖的多模态情感识别方法,有望提高情感计算应用的准确性和泛化能力。

排序理由 这是一篇详细介绍情感识别新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架融合面部和生理信号以提升情感识别能力

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Xiwen Luo, Jia Li, Rencheng Song, Yu Liu, Juan Cheng ·

    Adaptive Physical-Facial Representation Fusion via Subject-Invariant Cross-Modal Prompt Tuning for Video-Based Emotion Recognition

    arXiv:2605.05694v1 Announce Type: new Abstract: Emotion recognition from facial videos enables non-contact inference of human emotional states. Although facial expressions are widely used cues, they cannot fully reflect intrinsic affective states. Remote photoplethysmography (rPP…