摘要
本发明适用于语义通信技术领域,尤其涉及基于零样本学习的语义通信系统,所述系统包括:发送端、接收端和数据库,通过结合通信的图像、音频和文本多种模态的数据,通过利用CLIP和CLAP多模态模型的优势,将图像和音频映射到共享的文本编码向量空间,从而促进稳健的语义理解,适合在通信条件较差的复杂海洋环境中应用,可以实时处理和分析USV上各种传感器的数据,动态更新的知识数据库的集成确保了持续学习和性能提升且可以解释新的和看不见的数据,减少了对大型标记数据集的依赖,并解决了传统语义感知系统的局限性,从而提高恶劣通信条件下的可靠性和效率。
技术关键词
通信系统
文本
发送端
样本
接收端
音频
多模态
图像
解码器
语义特征
动态数据集
特征信息提取
预定义阈值
感知系统
模态特征
编码向量
动态更新
模块
系统为您推荐了相关专利信息
迁移学习模型
工业数据安全
数据安全监管
协方差矩阵
数据连接器
煤层开采工作面
危险性
煤层底板
工作面回采
数据