面向语义通信不依赖发送端模型的生成式图像压缩系统及方法

本发明公开了面向语义通信不依赖发送端模型的生成式图像压缩系统及方法，包括编码器和解码器；所述编码器用于对自然图像进行语义信息提取，并利用率失真优化对所提取语义信息数据进一步优化；所述解码器用于对编码器通过信道传递过来的优化后的语义信息进行复原，再通过多模态生成式模型重建图像。本发明提出的图像压缩系统以人类可以理解的模态作为中间表示，解码器无需事先知道编码器所使用的特定模型；系统中包含一个基于掩码的率失真优化模块，能够有效去除中间模态的与语义低相关的信息，保持重建图像的感知质量并降低比特率。