基于扩散模型的图像反演方法、装置、终端及存储介质

本发明公开了基于扩散模型的图像反演方法、装置、终端及存储介质，所述方法通过将初始图像输入编码器中，确定初始图像对应的初始潜在向量；获取文本提示，采用扩散反演模型基于文本提示对初始潜在向量进行反演和去噪，确定目标潜在向量，其中，扩散反演模型通过采用潜在偏差向量对去噪扩散隐式模型反演和去噪过程中的噪声建模实现，去噪扩散隐式模型基于UNet模型实现；采用解码器对目标潜在向量进行解码，确定目标图像。本发明通过潜在偏差向量建模了相邻两步潜在向量的偏差，能够在不引入额外参数的同时获得较优的初始噪声，有效地解决了现有的基于扩散模型的反演方法都无法在实现较低的计算开销的同时保证图像的高质量、高准确度重建的问题。