一种基于多模态特征融合的隐式身份认证方法

本发明提供了一种基于多模态特征融合的隐式身份认证方法，该方法将获取到的传感器数据的离散信号转换成为灰度图像，然后，使用预训练好的卷积神经网络进行特征提取，结合GRU提取触摸屏序列数据特征，然后将两种模态的特征送入多模态融合网络进行特征融合，包括初步特征融合和深层特征融合，初步特征融合通过自适应特征融合模块和通道交换特征融合模块分别对两种模态的特征进行初步融合，深层特征融合通过改进的网络模型CrossMamba进行多模态的深度特征融合，并生成融合后的最终特征，最后通过身份认证模块进行身份认证。通过本发明方案增强了模型的灵活性和适应性，大大提高了身份认证的准确率和可靠性。