摘要
本发明提供一种基于FLUX.1模型的商品背景生成方法、装置、设备和介质,方法包括:对商品图像进行像素级语义分割,生成含软边缘信息的前景掩码,并对商品图像进行处理,得到白底商品图;通过Janus‑Pro‑7B多模态模型,基于预设提示词模板对商品图像原始背景进行语义特征逆向解析,生成包含光照方向、材质属性的背景描述向量;进行视觉特征预处理,将处理结果以及背景描述向量输入至控制网络生成多模态控制条件;将所述背景描述向量、前景掩码及多模态控制条件,输入至FLUX.1扩散模型生成背景图像,通过多模态特征解耦、跨模型参数联动及动态光照匹配算法,实现高精度背景生成与自然融合。
技术关键词
背景生成方法
单目深度模型
融合结构特征
视觉特征
生成装置
生成深度图
语义特征
图像处理模块
边缘检测
图像分割
分块
多模态特征
像素
光照
处理器
网络