摘要
本发明公开了一种动态人脸表情的识别方法与系统,属于图像识别技术领域。本发明通过ResNet18网络模型对多帧连续的彩色图像进行卷积和帧差分处理,获得不同尺度的三个第一特征图集;通过自注意力ST‑Former模型分别对三个第一特征图集中每个特征图进行空间注意力加权和时间注意力加权,获得三个第二特征图集;通过条件随机场融合模块分别对三个第二特征图集中每一帧彩色图像对应的第二动态特征图和第二静态特征图进行特征交流增强,获得三个第三特征图集;通过跨尺度交叉融合模块将三个第三特征图集按照尺度从大到小依次融合,获得第五特征图集;通过全连接层对第五特征图集进行处理,输出表情识别结果。本发明能够有效增强系统对动态人脸表情的识别能力。
技术关键词
动态人脸
彩色图像
静态特征
加权特征
识别方法
多头注意力机制
Softmax函数
条件随机场
矩阵
识别系统
图像识别技术
模块
融合策略
网络
输出特征
非线性
系统为您推荐了相关专利信息
驱动因子识别方法
生态系统模型
情景
归因
多模式集合
分类识别模型
网络
多模态特征
数据
计算机程序产品
语义分割方法
图像语义分割
深度学习模型
多模态
编码结构
模型获取方法
文本
信息识别方法
位置识别
信息识别装置