一种基于大模型的图像语义通信系统

AITNT
正文
推荐专利
一种基于大模型的图像语义通信系统
申请号:CN202411527795
申请日期:2024-10-30
公开号:CN119048646B
公开日期:2025-01-03
类型:发明专利
摘要
本发明公开了一种基于大模型的图像语义通信系统,包括以下步骤:S1‑1:文本语义提取,采用语义提取器将具有低语义密度的原始图像转换为具有高语义密度的相应文本描述;S1‑2:语义编码和信道编码,确保在物理信道上进行有效的语义信息传输;S1‑3:信道解码和语义解码;S1‑4:图像重建:采用语义重构器中的文本编码器、扩散U‑Net和图像解码器进行图像重建;S1‑5:经验回放辅助的渐进学习,经验回放辅助的编码器和解码器在训练阶段持续从经验回放中取样;本发明的有益技术效果包括:提高传输语义的效率、改善语义和信道编码的稳定性、通过经验回放增强系统的泛化能力。
技术关键词
语义 信噪比加权 文本编码器 图像解码器 文本特征向量 图像特征向量 通信系统 信道解码器 图像重建 样本 图像编码器 信道编码器 补丁 预训练模型
系统为您推荐了相关专利信息
1
基于掩码引导的混凝土缺陷图像生成方法
混凝土缺陷 图像生成方法 主题特征 噪声特征 交叉注意力机制
2
基于AI技术的表单辅助填写方法
填写方法 表单 光学字符识别技术 校验规则 业务系统
3
一种地铁区间设计中基于建筑物数据自动生成图纸的方法
数据 监测点 平面图 图纸 生成建筑物
4
一种基于领域增强大语言模型的检索方法和系统
大语言模型 文本 检索方法 生成提示信息 实体
5
一种金融交易的风险评估与预警方法
风险评估规则 融合特征 预警方法 动态 金融交易数据
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号