摘要
本发明公开了摄像头数据发送方法、接收方法、传输方法、系统及装置,涉及数据传输领域,将语义通信与摄像头进行软硬结合,实现低成本、高精度的数据传输。首先,在发送端(摄像头)设计基于轻量级视觉Transformer网络从图像中提取语义特征。然后提出一种基于大语言模型(LLM)的语义编码器,用于联合处理文本模态的通信参数与图像语义特征,实现具有信道自适应能力的语义编码过程。在接收端(如基站)采用Decoder Only架构的视觉Transformer作为语义解码器实现高质量的图像恢复。该方法为“语义摄像头”的系统实现提供了关键的算法支撑与理论基础。
技术关键词
数据发送方法
数据接收方法
语义特征
摄像头数据传输系统
数据传输方法
接收端
图像
发送端
可读储存介质
信号
注意力
解码器
储存器
信道
网络
大语言模型
视觉
系统为您推荐了相关专利信息
数据考核方法
多源异构数据
视频特征向量
文本特征向量
指标
手机外壳检测
编码向量
手机外壳表面
纹理分布特征
梯度方向直方图