mixed reality

合成数据框架提升头戴式显示器面部表情识别能力

研究人员开发了一个新框架，用于为头戴式显示器（HMD）中的面部表情识别（FER）生成合成数据。该方法解决了由于隐私和平台多样性问题而难以从头戴式摄像头收集真实世界数据这一挑战。通过从现有的正面图像重建3D纹理网格，并从HMD视角进行渲染，该系统创建了一个更具应用性的数据集。还引入了一个纹理空间对齐网络（TSAN），以确保保留详细的面部表情，从而提高模型在各种摄像头设置下的性能和泛化能力。