摘要
本发明涉及人工智能技术领域,特别是基于多维交叉注意力3D人脸视频情感异常识别方法及设备。本发明通过提出的注意力框架,利用时空通道三维特征深度融合RGB视觉特征与面部深度特征;且在三个维度上通过多头自注意力机制捕捉长距离与长时序依赖关系,通过交叉门控机制实现不同维度特征的动态加权融合,有效增强了特征表达的判别性,在保持信息完整性的同时抑制了冗余特征干扰。从而优化面部表情肌肉动态变化的特征提取,实现RGB纹理与深度几何特征的跨模态互补表征,使情感异常的识别更加准确。
技术关键词
异常识别方法
输出特征
人脸
RGB特征
融合空间信息
通道
卷积神经网络模型
视频
编码
重构
热力图
注意力机制
表达式
融合特征
统计特征
时序依赖关系
模块
数据
矩阵
系统为您推荐了相关专利信息
生理
Android设备
注意力机制
全局平均池化
卷积神经网络模型
融合算法
跨模态
级联卷积神经网络
彩色图像
数据