基于文本引导的细粒度活体人脸属性编辑方法及系统

本发明公开了一种基于文本引导的细粒度活体人脸属性编辑方法及系统，该方法包括下述步骤：获取人脸图像数据集和文本数据集，并进行数据预处理；基于人脸身份特征提取模块、面部关键点特征提取模块分别提取人脸图像的多尺度人脸身份特征和多尺度面部关键点特征；基于多尺度特征混合模块将多尺度人脸身份特征和多尺度面部关键点特征进行特征拼接，并加权平均得到人脸身份结构特征；分别将人脸图像和原始文本嵌入分别作为图像模态和文本模态注入到条件扩散模型中；进行两阶段的训练；基于原始文本和引导文本获得最终的文本条件向量，输入训练后的条件扩散模型，生成细粒度的人脸属性编辑图片。本发明实现人脸属性编辑的精细化和多样化。