摘要
本发明提供一种基于时空双流掩码重建的微表情识别预训练方法,涉及微表情识别技术领域,本发明通过对所有微表情视频序列中的每一帧进行预处理,对预处理后的数据集样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;然后构建并自监督预训练时空双流掩码自编码器;训练后得到微表情识别自监督预训练模型,将微表情视频中的每一帧经过预处理操作后,再对预处理后的数据样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;将所得结果输入至训练得到的微表情识别自监督预训练模型,即可实现对微表情图像序列和光流图序列的重建。
技术关键词
预训练方法
注意力
序列
编码器训练
预训练模型
像素
微表情数据
视频
解码器
微表情识别技术
图像
多层感知机
重构
时域特征
模块
关键点
人脸检测算法
系统为您推荐了相关专利信息
恶意流量检测方法
教师
Inception结构
学生
物联网流量
健康风险评估系统
BERT模型
特征提取模块
生成路径信息
嵌入特征
神经网络预测模型
多层感知机
模型预测控制器
无人飞行器控制技术
控制无人机