一种面向海面救援的雷视融合人体动作识别系统及方法

本发明提供一种面向海面救援的雷视融合人体动作识别系统及方法，属于传感器融合领域。为解决海面救援时对落水人员动作识别精度不足，探测时间长，无法实现对人体动作多维度探测的问题。本发明通过毫米波雷达信号处理获取人体求救动作的雷达时频二值图，通过红外相机图像处理获取人体求救动作的红外帧序列，两种数据经时间配准后在各自搭建的嵌入空间重构模块和嵌入通道重构模块的卷积神经网络中进行识别，根据距离因子的大小调整两种传感器的权重，经过线性加权的决策级融合策略，实现动作的融合识别。借助毫米波雷达和红外相机的优势，可在海雾、夜晚等复杂场景下快速、准确地识别落水人员求救动作，确保海面救援工作的顺利进行。