一种多模态步态识别方法和系统

本发明提出了一种多模态步态识别方法和系统，旨在解决复杂环境下步态识别的准确性和鲁棒性问题。本发明通过结合步态轮廓图和骨架高斯热图两种模态信息，利用基于残差连接的多尺度卷积特征提取模块分别提取全局‑局部浅层步态特征，并通过跨模态注意力融合模块对两种模态的特征进行自适应权重分配和融合。进一步，引入滑动窗口Transformer模块对融合后的特征进行深层步态特征提取，建模步态信息的长程时空依赖关系，得到具有高分辨力的步态特征向量。实验结果表明，本发明在复杂场景下的步态识别精度显著优于现有方法，特别是在遮挡、复杂背景等极端条件下表现出色。本发明为开放环境下的高精度步态识别提供了新的解决方案。