面向星地语义通信的多模态联合信源信道编码系统

一种面向星地语义通信的多模态联合信源信道编码系统，包括联合信源信道编码器和解码器；编码器用于对输入的多模态数据依次执行特征提取、特征融合、数据裁剪及相位调制操作，以生成发射信号，并通过信道向地面基站传输；解码器用于对接收信号依次执行实虚部分离、数据扩展、特征提取及模态数据恢复操作，以重建多模态数据。该系统能够通过挖掘多模态数据间的公共语义信息，并结合卫星下行链路的时变低信噪比信道特性，使用与数据重建质量高度相关的信息瓶颈理论作为指导进行编码空间的优化，自适应地生成高压缩率的复数域传输信号，不仅能够保证多模态数据的重建质量，也能够显著降低卫星通信的带宽和能耗开销。