PhysVR

PhysVR框架利用视觉-语言模型精炼远程生理测量

研究人员开发了PhysVR，一个旨在提高面部视频远程生理测量（rPPG）准确性的新框架。该系统利用视觉-语言模型识别和抑制通常会影响rPPG信号的干扰，例如光照变化和头部运动。PhysVR通过整合生理和视觉证据来精炼时域特征，并采用专门的专家来适应性地减少特定类型的干扰，然后进行最终的rPPG估计。在多个公共数据集上的实验表明，PhysVR的性能显著优于现有方法。