摘要
本发明公开了一种基于扩散模型文本引导的红外图像生成方法,包括:一、训练集图像的获取;二、构建扩散模型文本引导网络;三、将可见光红外训练集和图像天气文本描述经过扩散模型文本引导网络进行特征提取;四、在可见光红外训练集和图像天气文本描述经过扩散模型文本引导网络特征提取中构建总损失;五、基于总损失对扩散模型文本引导网络进行训练;六、基于训练好的扩散模型文本引导网络生成红外图像。本发明方法步骤简单、设计合理,利用天气文本描述天气状况,并基于可见光图像和天气文本描述的多模态信息耦合输入扩散模型文本引导网络训练,实现后续不同天气条件下的红外图像生成,提高红外图像的生成质量。
技术关键词
输出特征
图像生成方法
可见光图像
天气
计算机
积层
文本编码器
模块
解码器
生成红外图像
矩阵
网络
样本
像素点
上采样
训练集
系统为您推荐了相关专利信息
词语
文档分类方法
训练主题模型
预训练语言模型
语义
深度学习网络
遥感图像数据
自动编码器
样本
计算机可执行指令
作业机器人
作业监控方法
作业工位
作业监控装置
捕捉器