摘要
本发明提供了一种基于媒体知识库的广域超视距视频语义编码方法、系统、设备、介质及产品,涉及数据处理领域。包括:终端获得多模态图像序列并发送给边缘服务器;边缘服务器提取多模态图像序列中前景的第一原始特征,在边缘服务器的语义知识库中查询与第一原始特征匹配的第一匹配码字,对第一原始特征与第一匹配码字进行语义编码得到第一语义信息流,将第一语义信息流和第一匹配码字的第一码字索引发送给云端服务器;云端服务器在云端服务器的语义知识库中查询第一码字索引对应的第一匹配码字,对第一语义信息流与第一匹配码字进行语义解码得到第一重建特征;将第一重建特征映射回图像空间得到重构的多模态图像序列,从而实现视频的高效传输。
技术关键词
语义知识库
码字
语义编码方法
云端服务器
多模态
图像
终端
解码器
媒体
序列
编码器
通用特征
索引
样本
视频
标签