一种基于多模态影像融合的眼底图像智能增强方法及其系统

本发明提供一种基于多模态影像融合的眼底图像智能增强方法及系统，方法包括以下步骤：获取彩色眼底摄影CFP图像和光学相干断层扫描OCT图像并进行预处理；对预处理后的彩色眼底摄影CFP图像和光学相干断层扫描OCT图像建立图像空间坐标映射关系，及进行特征空间对齐；通过多层Transformer特征融合模块的第一分支网络结构和第二分支网络结构分别对处理后的彩色眼底摄影CFP图像的特征和光学相干断层扫描OCT图像进行特征提取和增强，将彩色眼底摄影CFP图像的特征和光学相干断层扫描OCT图像的特征进行融合，得到多模态融合图像特征；根据多模态融合图像特征，采用深度学习模型重构眼底图像；构建图像增强模型，得到增强后的眼底图像。