摘要
本申请实施例公开了AI生成式模型的训练、图像生成方法及电子设备,包括:获取用于对人工智能AI生成式模型进行训练的多个训练数据组,所述多个训练数据组中包括对应多种不同控制类型的多个条件图像;通过AI生成式模型的适配器网络,对条件图像以及控制指令文本内容分别进行特征提取,以获得控制信息;通过交叉注意力的方式将所述控制信息注入到所述AI生成式模型的主干网络中,并将所述条件图像的空间编码信息引入到所述主干网络中,并完成对所述AI生成式模型的训练,以便通过多种不同控制类型的条件图像对所述AI生成式模型进行统一控制。通过本申请实施例,能够实现多种不同类型的控制信号对模型的统一控制。
技术关键词
文本
适配器
图像生成方法
网络
计算机可执行指令
模型训练方法
多模态
电子设备
注意力
存储程序指令
处理器
数据
计算机程序产品
编码
可读存储介质
存储器