可见光成像与红外成像融合方法、装置、电子设备及存储介质

本发明涉及一种可见光成像与红外成像融合方法、装置、电子设备及存储介质，该方法包括：获取可见光成像与红外成像；提取可见光成像中的语义信息，并与预设任务信息输入第一大语言模型，且获得任务提示词；基于可见光成像与红外成像分别确定可见光成像隐变量与红外成像隐变量；将任务提示词、可见光成像隐变量与红外成像隐变量合成的条件隐变量输入变换解码模型，获得预测红外图像，其中，基于变换器解码器，通过训练数据训练获得变换解码模型；将当前帧可见光图像与所述预测红外图像融合，获得目标融合图像。本发明使得智能模型能够理解图像或者语言在世界的含义，预测红外图像语义的指示性好于原始红外成像，较大的发挥了两种成像技术优势。