摘要
本发明公开了一种基于分割语义引导对比学习的SAR到光学图像转换方法,通过引入预训练的分割网络提取SAR与光学图像的语义特征,实现跨模态语义空间的显式对齐,提升生成图像的语义一致性与结构保真度;同时,提出基于语义类别约束的块级对比损失机制,在保持空间信息完整性的同时,加强同类地物区域特征的聚合表达,提升对复杂遥感场景中多实例目标的建模能力。此外,提出分割循环损失,通过将生成的光学图像和原始SAR图像再次输入语义分割模型,输出两者的语义标签再进行一致性约束,构建跨模态闭环优化机制,从而进一步增强生成图像的语义可分性与结构可逆性;该方法在训练阶段联合引入多层语义引导、对比约束与分割循环约束,优化生成器对遥感图像中空间分布、地物边界与类别语义的多维感知;在推理阶段则无需引入辅助模块,可高效输出结构清晰、语义明确的光学图像。本发明可显著提升SAR图像的可视化表达能力及下游遥感任务的适应性,具有良好的泛化能力与工程实用前景。
技术关键词
语义特征提取
SAR图像分割
转换方法
编码器
空间金字塔池化
标签
ResNet网络
特征提取器
跨模态
残差模块
编码特征
多尺度特征提取
高层语义特征
滑动窗口机制
纹理
系统为您推荐了相关专利信息
驾驶员健康状态
降噪方法
编码器
驾驶员异常检测
小波去噪
音视频
音频
数据采集模块
数据分析模块
背景噪声
语音交互方法
声学特征
交互模型
文本编码器
上下文特征
可见光图像
编码特征
文本生成模型
噪声图像
信息编码器
失效监测方法
失效监测装置
油门开度传感器
数据压缩
变量