摘要
本发明涉及信息安全技术领域,公开了一种用于金融业务办理的用户意愿度评估方法及装置,该方法包括:将待检测音视频数据输入多模态融合模型中,得到多模态融合特征;基于多模态融合特征计算负面情绪比例与情绪波动程度;基于待检测音视频数据提取面部变化数据,并基于面部变化数据进行面部行为异常检测,得到面部行为异常评分;基于待检测音视频数据提取语音变化数据,并基于语音变化数据进行语音行为异常检测,得到语音行为异常评分;基于负面情绪比例、情绪波动程度、面部行为异常评分与语音行为异常评分确定用户意愿度评估结果。本发明实现了对用户在业务办理过程中情绪变化和行为异常的动态捕捉,能够更精准地发现潜在欺诈风险。
技术关键词
金融业务办理
编码特征
音视频
多模态
度评估方法
融合特征
面部
分支
数据
眼部关键点
视频帧信息
计算机
时序
坐标
模态特征
视频特征提取
语音特征提取
系统为您推荐了相关专利信息
情绪特征
多模态情绪
序列
识别用户信息
情绪识别模型
文本
实体关系抽取模型
三元组
抽取算法
BERT模型
多模态影像数据
网络特征
矩阵
疾病辅助诊断方法
大脑结构