基于互补性引导解耦的组合图像检索方法及系统

本发明涉及一种基于互补性引导解耦的组合图像检索方法及系统，属于多模态信息检索技术领域，首先提出一个一致性及冲突性特征提取模块，通过跨模态语义交互，建模出参考图像和修改文本之间的一致性和冲突性关系，将各个模态的原始局部特征表示为一致性特征和冲突性特征；其次，本发明提出一个互补性引导的解耦模块，基于一致性和冲突性特征的互补性质，减少它们之间的语义重叠，从而在各个模态内推开一致性和冲突性特征，以实现模态内解纠缠；最后，本发明提出一个非对称组合模块，从一致性和非一致性特征提取组合需要的保留和修改，构建多模态查询特征，实现对用户目标图像的有效检索。