一种基于VQGAN优化的语义信息传输通信方法及系统

本发明提供了一种基于VQGAN优化的语义信息传输通信方法及系统，方法包括：建立用于图像的VQGAN模型；将待传输图像输入VQGAN模型的编码器，由编码器提取图像对应的图像特征；根据图像特征的特征向量查找距离最近的离散潜在空间表示的索引；记录嵌入向量的索引并进行信道编码和调制，经过信道进行传输；信道传输后的通过解调和信道解码恢复索引；根据索引找到码本中的空间表示，利用接收端的解码器进行图像重建，得到待传输图像对应的重建图像。本发明提出使用矢量量化的方式建立离散码本，通过只传输码本的索引来减少传输内容，并且基于传统的信道编码对抗信道的动态变化和不同设备之间的兼容，基于生成对抗网络进行高分辨率的图像重建。