摘要
本发明公开了一种基于光照特征解耦的换脸视频检测方法及系统,该方法包括以下步骤:视频分帧并提取检测区域的RGB图像;将RGB图像送入可学习的局部重力模式提取模块,提取局部重力模式图像;将RGB图像和局部重力模式图像送入双支流高语义特征提取模块,分别提取光照相关特征和光照不变特征;将光照相关特征送入基于重光照的对比学习模块;将分类特征送入分类器得到预测概率分布,利用交叉熵损失进行二分类监督;模型训练并保存模型;模型测试加载模型,输出待测视频的检测结果。本发明利用域泛化策略对光照特征进行解耦,有效抑制域相关光照信息的干扰,提高检测特征的表征能力,具有较好检测效果和泛化能力。
技术关键词
语义特征提取
视频检测方法
光照特征
特征提取网络
分类特征
特征提取模块
更新网络参数
分层特征
层级
重力
图像
模式
视频解码
面部关键点
分类器
数据自动更新
测试模块