一种基于多尺度注意力的多模态毫米波步态识别方法

本发明公开了一种基于多尺度注意力的多模态毫米波步态识别方法，包括：毫米波雷达同时获取行人的三维点云数据和微多普勒图谱数据，并进行预处理操作；对预处理后的三维点云数据采用点云分支进行多尺度特征提取，对微多普勒图谱数据使用微多普勒分支进行微多普勒多尺度特征提取；将点云分支与微多普勒分支在不同尺度输出的特征通过线性投影和注意力加权相结合，得到多帧步态序列特征；将多帧步态序列特征输入到双向长短期记忆网络中进行时间维度的建模，并通过时间注意力机制关注关键时刻动作特征，采用分类器输出行人步态的识别结果。本发明具有隐私保护强、识别精度高、鲁棒性强的优势，适用于安防监控、智能家居以及医疗康护等领域。