摘要
本发明公开了一种基于大模型的图像语义通信系统,包括以下步骤:S1‑1:文本语义提取,采用语义提取器将具有低语义密度的原始图像转换为具有高语义密度的相应文本描述;S1‑2:语义编码和信道编码,确保在物理信道上进行有效的语义信息传输;S1‑3:信道解码和语义解码;S1‑4:图像重建:采用语义重构器中的文本编码器、扩散U‑Net和图像解码器进行图像重建;S1‑5:经验回放辅助的渐进学习,经验回放辅助的编码器和解码器在训练阶段持续从经验回放中取样;本发明的有益技术效果包括:提高传输语义的效率、改善语义和信道编码的稳定性、通过经验回放增强系统的泛化能力。
技术关键词
语义
信噪比加权
文本编码器
图像解码器
文本特征向量
图像特征向量
通信系统
信道解码器
图像重建
样本
图像编码器
信道编码器
补丁
预训练模型
系统为您推荐了相关专利信息
混凝土缺陷
图像生成方法
主题特征
噪声特征
交叉注意力机制
填写方法
表单
光学字符识别技术
校验规则
业务系统
风险评估规则
融合特征
预警方法
动态
金融交易数据