摘要
本发明提供一种多模态频域交叉图像融合方法,涉及图像融合技术领域。该方法包括:S1、构建多模态图像融合网络;其中,所述多模态图像融合网络包括:编码器网络、跨模态交叉融合网络以及解码器;多模态图像融合网络的执行步骤包括:使用编码器网络对输入的各个模态图像提取不同频域特征;使用跨模态交叉融合网络通过跨层连接与交叉连接的方式实现不同模态图像各个频域特征的融合;将融合后的特征输入解码器,对融合特征进行解码,输出融合图片;S2、利用多模态图像对构建的多模态图像融合网络进行训练,输出包含各个模态图像特征的融合图片。采用本发明,能够提高多模态图像的融合效果,使得融合结果具有更清晰的细节以及更丰富的信息。
技术关键词
可见光图像
图像融合方法
编码器
频域特征
多模态
计算机可读取存储介质
跨模态
融合特征
特征提取模块
输入解码器
融合梯度信息
转换器
通道
基础
图像融合技术
浅层特征提取
网络模块
注意力
系统为您推荐了相关专利信息
路径识别方法
智能传感器
路径识别技术
支持多源数据融合
电缆故障诊断
融合方法
生成器网络
汉字
生成融合图像
输出特征
深度学习识别方法
印章
图像
语义特征提取
金字塔网络
LiDAR点云
混合模块
特征提取模块
自动驾驶系统
采样点
监控报警方法
实时监测数据
多模态
信息发送方式
智能分析算法