基于声纹特征和唇同步的贷款者语音交互风控方法及系统

本申请涉及一种基于声纹特征和唇同步的贷款者语音交互风控方法及系统。该方法包括：通过采集设备同步采集用户的语音信号及面部视频流数据；对语音信号进行语音特征提取，生成声纹特征向量及语音时序特征向量；对面部视频流数据进行唇部运动特征分析，提取表征唇部动态变化的唇动轨迹特征向量；将声纹特征向量与预存的基准声纹数据库进行身份匹配，生成第一匹配度评分；对语音时序特征向量以及唇动轨迹特征向量进行跨模态时序对齐分析，生成第二匹配度评分；根据第一匹配度评分以及第二匹配度评分，生成综合风控评分结果。本申请提供的方案，能够形成多模态交叉验证机制，有效克服传统单模态检测方案的局限性。