摘要
本发明提供一种基于扩散模型的轻量虚拟试穿方法、系统及介质,该方法包括:创建一个轻量级掩码提取器,对模特图像和服装图像上的衣服提取精确的掩码;对服装掩码和服装图像分别进行形状调整;将模特图像和服装图像分别编码到潜在空间,并且使用DDIM反转技术,分别获得T+1个备用的噪声潜在特征;在扩散模型的扩散去噪过程的前期步骤中取一时间步t1,将备用服装图像的潜在信息注入到模特图像的重建过程中;在后期步骤中取一时间步t1,通过潜在信息替换技术恢复背景;进行逐步去噪,直至去噪完全,最后将无噪声的潜在特征解码到像素空间,得到生成的换装图像结果。本发明无需对扩散模型进行训练,就能生成高质量的试穿图像,提升用户体验。
技术关键词
虚拟试穿方法
模特
服装
Sigmoid函数
图像
虚拟试穿系统
文本编码器
反转技术
噪声
上采样
变量
模块
衣服
解码
分辨率
像素
穿着