多模态融合的复杂环境目标识别系统

本发明公开了多模态融合的复杂环境目标识别系统，涉及环境目标识别技术领域。本发明包括硬件系统包括主控板、边缘计算模块、可见光相机、红外成像仪、毫米波雷达以及环境传感器；软件系统包括数据预处理模块、多模态融合模块以及AI推理模块；多模态融合模块获取由环境传感器采集的光照强度、湿度以及运动目标数量的环境参数。本发明采用可见光+红外+雷达的多模态动态融合，使低光照下的目标检测准确率大大提升；端侧推理延迟降至80ms，较云端方案延迟大大改善；通过动态权重调整与增量学习，模型在雨雾场景的漏检率大大降低；轻量化模型适配低算力边缘设备，硬件成本和功耗大大降低。