一种基于多模态查询的电商虚拟试衣方法及系统

本发明适用于虚拟试衣技术领域，尤其涉及一种基于多模态查询的电商虚拟试衣方法及系统，所述系统包括：图‑图模块，用于从模糊图像/视频出发匹配到真实商品图；文‑图模块，用于从查询文本出发匹配到真实商品图；虚拟试衣模块，用于生成具有固定服装和可选条件的可自由编辑的人像；根据用户输入的查询模态信息，自动选择相应的查询模块，并将匹配到的商品服装图像输入到虚拟试衣模块，生成虚拟试衣图像。本发明通过引入大模型辅助和潜在扩散模型，结合多功能插件，实现一站式操作，完成自由可编辑的虚拟试衣图像，能够显著提高用户的购物体验，减少因不合适而产生的退换货，降低商家运营成本，同时支持商家全面和个性化的服装展示。