扩散模型的构建方法、装置、设备及存储介质

本发明实施例提供一种扩散模型的构建方法、装置、设备及存储介质。方法包括：获取预训练模型，并构建目标扩散模型的目标模型结构，其中，所述目标模型结构包括基础网络和目标上采样堆栈网络；通过所述预训练模型对所述目标模型结构进行初始化操作，得到初始扩散模型；对所述初始扩散模型依次进行时序建模处理和文本嵌入处理，得到处理后的初始扩散模型；根据训练集对所述建模后的初始扩散模型进行训练，得到所述目标扩散模型，其中，所述训练集包括若干文本信息，所述目标扩散模型用于对所述若干文本信息进行分析，得到对应的视频信息。本申请旨在生成性能较优且通用性的扩散模型，且降低了扩散模型的构建成本，能够满足金融领域等场景的需求。