研究人员开发了一个新的视频情感识别框架,该框架将面部表情与远程光电容积脉搏图(rPPG)的生理信号相结合。他们的方法使用提示调优将rPPG信息整合到Vision Transformer中,同时保留预训练的面部表征。此外,还采用了解耦适配器来分离主体共享和主体特异性组件,从而增强了跨不同个体的泛化能力。 AI
影响 引入了一种新颖的多模态情感识别方法,有望提高情感计算应用的准确性和泛化能力。
排序理由 这是一篇详细介绍情感识别新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →