一种基于分层语义丰富的多模态图像融合方法

本发明涉及一种基于分层语义丰富的多模态图像融合方法，属于多模态图像融合技术领域。所述方法，采用多尺度特征聚合和重分配来平衡全局信息交换，同时动态地桥接融合和分割任务，并引入一种渐进式语义密集注入策略，通过密集连接将全局语义注入高度一致的红外特征中，然后将语义‑红外混合特征传递到可见光特征中。其次，引入两种类型的特征融合模块，一种利用跨模态注意力机制进行更全面的特征融合，另一种利用语义特征作为第三输入来增强图像融合的语义表征，通过动态平衡全局语义一致性和细粒度局部细节表示，在复杂场景下实现特征融合。本发明通过语义收集、分发和注入等策略实现了语义信息的分层丰富，增强了融合视觉效果和下游感知性能。