摘要
本发明属于图像处理技术领域,公开了一种通用跨域图像转换方法及系统。该方法从StyleGAN网络的空间中搜索隐编码,保持StyleGAN网络后续的训练参数固定;对于单张给定的源域图像使用双分支结构学习目标使该最适CLIP隐编码保持和源域图像的跨域对应关系,以及使用CLIP2P映射器,将该CLIP隐编码映射到StyleGAN的隐空间中,由生成器生成目标域图像;结合辅助损失函数求和,获得总损失函数,更新网络参数;进行多次迭代训练,获取最终的通用跨域图像。本发明借助基于优化和基于学习的混合训练策略来处理来自任意域的单张输入图像,无需事先指定源域,提升其灵活性。
技术关键词
图像转换方法
双分支结构
更新网络参数
图像编码器
句子模板
子模块
图像转换系统
非线性
多层感知机
表达式
关系
编码模块
语义
代表
系统为您推荐了相关专利信息
标注方法
标注系统
图像分割模型
图像特征向量
图像编码器
预训练模型
多模态
学习方法
全局视觉特征
文本编码器
视觉情感识别方法
原型
情感类别
图像编码器
文本编码器