摘要
本发明涉及医学电子设备技术领域,公开了一种基于生成对抗分离与交换表情的面部情绪识别方法和系统;所采用的面部表情识别模型的训练过程包括:基于自监督的掩码自编码器对视觉变换器进行预训练;通过视觉变换器中的图像编码器提取两张人脸表情图像对应的人脸特征向量;通过对人脸特征向量进行特征解耦,分离出情感相关特征和情感无关特征,并进行特征交换生成交换人脸特征;将人脸关键点特征与交换人脸特征融合,生成融合特征;基于融合特征并使用生成器生成重建的人脸表情图像和合成的交换人脸表情图像,并约束重建图像与原始人脸表情图像的身份一致性;利用鉴别器对重建图像的真实性进行判别,同时通过分类器基于情感相关特征进行面部情绪分类,优化面部表情识别模型参数。有效解决了现有技术中模型泛化性差、生成质量低及非配对数据训练困难的核心问题,降低了训练成本。
技术关键词
人脸表情图像
面部情绪识别方法
面部表情识别模型
人脸特征向量
人脸特征融合
融合特征
图像编码器
变换器
身份
生成对抗网络
视觉
人脸关键点检测
情绪识别系统
交叉注意力机制
辅助分类器
系统为您推荐了相关专利信息
同步分析方法
同步性
独立动作
动态时间规整算法
序列
物联网管理
智能锁系统
动态密钥
便携式终端
电子围栏功能
调节云台
人脸识别算法
持续跟踪目标
云台控制系统
人脸身份识别
远程监视系统
运动检测模块
面部表情识别模型
边缘检测算法
感知环境变化