具有多尺度视觉变换器的鲁棒图像语义通信系统及方法

本发明提供了一种具有多尺度视觉变换器的鲁棒图像语义通信系统及方法，涉及人工智能技术领域。本发明实施例中，基于多尺度视觉转换器的鲁棒语义通信系统中，语义编码端包括粗粒度和细粒度语义提取器以及语义融合模块，细粒度分支结合了一个语义重要性评估模块来选择关键语义，而粗粒度分支则采用分层策略来逐步生成鲁棒语义。语义融合模块将来自双分支的语义信息与交叉注意力机制相融合。从而，基于多尺度视觉转换器的鲁棒语义通信系统促进了多尺度语义的提取，并展示了其在减轻语义损伤方面的有效性，从而标志着朝着实现鲁棒的语义通信迈出了重要一步。