摘要
本发明公开了一种基于模型训练、图文生图技术的人物风格图像生成方法、系统、设备及介质,包括:训练优化风格底模,扩大风格底模训练样本,提高风格底模泛化能力,得到优化后的目标风格基础模型;获取用户的人物形象数据,对人物形象数据进行预处理,提取用户的人脸特征信息,通过用户反馈机制进行人脸特征信息校对,获得最终的人物形象训练数据;将人物形象训练数据输入至Stable Diffusion模型,训练得到人物特有LoRA模型;设置人物风格图像生成信息,并基于所述人物风格图像生成信息配置相应的人物风格图像生成参数;基于所述目标风格基础模型、人物特有LoRA模型及人物风格图像生成参数进行文生图及图生图处理,最终获得目标人物风格图像。
技术关键词
风格图像生成方法
人脸特征信息
生成参数
图文
人脸关键点检测
底模
数据
人物人脸特征
图像编辑软件
信息编码
图像生成系统
多尺度特征融合
机制
人脸检测算法
人脸特征提取
基础
旋转算法