一种智能相机双光图像融合方法及双光一体化智能相机

本发明涉及智能视觉与图像融合技术领域，公开了一种智能相机双光图像融合方法及双光一体化智能相机，包括：采集原始红外图像和原始可见光图像；对原始红外图像和原始可见光图像进行预处理得到双路预处理图像；对双路预处理图像采用改进光流算法计算光流场；生成红外带运动感知特征集合和可见光带运动感知特征集合；基于红外带运动感知特征集合和可见光带运动感知特征集合生成初步融合图像；对初步融合图像，得到包括清晰度、运动一致性及细节丰富度评估指标的评估结果；根据评估结果动态调整跨模态注意力权重与门控值；基于动态调整的跨模态注意力权重与门控值得到优化后的最终融合特征。本发明让融合图像在目标快速运动时无错位。