一种基于层次化特征融合的内窥镜图像跨模态翻译方法

本发明公开了一种基于层次化特征融合的内窥镜图像跨模态翻译方法，涉及计算机视觉与图像风格迁移技术领域。该方法包括：在编码层，白光图像依次进行三次卷积操作，每次卷积后的特征图分别输入并行多尺度特征提取模块及多尺度跨层双注意力模块处理，得到多尺度特征图和各卷积后特征的细节信息；在解码层，将多尺度特征图与细节信息通过跳跃连接拼接并上采样，生成初始窄带光图像；在输出层，对初始窄带光图像进行卷积及激活操作，输出最终窄带光图像。本发明有效实现了白光图像到窄带光图像的精准翻译，为医疗资源有限的场景提供了可靠的创新解决方案。