摘要
本发明涉及基于船载雷达图像与视觉图像融合的实时高精度测波方法,包括:搭建集成探测模块,将雷达天线的触发脉冲信号输出经边缘计算单元处理后接入摄像头外部I/O成像输入,完成参数标定;构造跨模态域适应模块,结合从外部惯性测量单元获取的本船载体实际运动状态进行补偿,实现雷达图像至可见光图像空间坐标点映射;构造波浪多模态检测模型;实船搭载集成探测系统,标注波浪参数,构建训练和测试数据集;冻结主干网络中的融合层,分步输入可见光图像和经时空同步映射后的雷达回波图像,进行第一阶段单模态预训练;解冻融合层与检测头,采用混合精度训练联合微调加速模型收敛,结合海浪物理模型参数反演,形成最终检测模型。本方法高效可靠。
技术关键词
船载雷达图像
可见光图像
雷达回波图像
测波方法
雷达天线
集成探测系统
协同注意力
多模态
跨模态
波浪参数
检测头
纹理特征识别
视觉
摄像机
海浪
相机