摘要
本发明涉及基于状态选择特征聚合的免配准医学图像融合方法,属医学图像融合领域。本发明包括:将待融合的未配准多模态医学图像输入分块特征编码模块得到分块编码特征;利用mamba模型将全局偏移信息聚合到状态特征中;将状态特征作为基准,选择每个分块的信息聚合路径;根据预测的聚合路径,聚合相邻分块中的偏移特征;利用固定参数的特征编码器提取的严格对齐特征,对免配准偏移聚合网络的输出进行约束,以得到消除偏移的特征;将消除偏移的特征输入特征融合模块,通过在空间维度和通道维度进行特征融合,重建出最终融合图像。本发明解决融合结果中由于源图像空间不对齐导致的伪影、模态丢失和偏移问题,提高融合结果的质量和可用性。
技术关键词
医学图像融合方法
偏移特征
编码特征
分块特征
融合特征
多模态医学图像
双线性插值
编码器
通道
序列
令牌
优化网络参数
编码模块
级联
标签特征
图像配准