摘要
本申请涉及一种基于域适应解析增量学习的多模态深度伪造检测方法。所述方法包括:构建多模态深度伪造检测优化模型;在任务‑域解析增量学习模块设计任务域解析增量学习机制,递归学习多模态深度伪造序列任务中不同数据域和检测标签之间的映射关系,根据映射关系对输入的多模态视频数据进行解析,输出初始检测结果;在视觉‑音频表示增量适应模块设计了视听觉表征持续适配方法学习新任务的独特可区分的多模态表示,并将多模态表示与初始数据原型空间对齐实现对初始检测结果的优化,得到最终检测结果。采用本方法能够提高检测模型在多模态深度伪造持续检测任务中性能。
技术关键词
多模态深度
分类器
融合特征
阶段
矩阵
标签
语义特征
原型
数据
适配器
异构
音频特征
迭代算法
视觉特征
音频编码器
视频编码器
听觉
系统为您推荐了相关专利信息
阶段
优化调控方法
状态空间模型
底物
综合评价指标
热泵系统
概率分布函数
系统故障预测方法
退化模型
变量
变形方法
神经网络预测模型
乳化石蜡
板材含水率
卷积神经网络结构
拓扑特征
动态风险评估方法
食道癌手术
生成对抗网络模型
编码器