摘要
本发明公开了基于多模态深度伪造检测的远程面试反欺诈系统及方法,涉及数据分析技术领域;通过采集求职者身份证件信息与生物特征,生成人脸哈希和声纹哈希,实现零知识身份匹配后,将哈希三元组存入区块链;面试过程中,通过分析生理特征对、深度伪造异常指数、声纹合成特征值及唇音最大偏移量,计算三层置信度并基于历史攻击率调整权重生成融合评分;优化RNN行为分析网络,输出实时异常行为指数,并结合融合评分得到最终风险评分后触发三级响应机制;本发明提升了欺诈拦截率,降低了误判率,在保障隐私安全前提下有效解决身份冒用、深度伪造和行为欺诈问题。
技术关键词
多模态深度
反欺诈方法
RNN神经网络
跨模态
反欺诈系统
视频帧
指数
特征值
分析生理特征
三元组
生物
身份证件信息
序列
风险
DTW算法
数据分析技术