摘要
本申请提供了一种三维高斯泼溅多视角视频联合语义编码方法,涉及计算机视觉处理技术领域。该方法通过将多视角视频图像编码和前馈3DGS技术结合,采用双视角编码和高斯参数预测并行运算的架构,左右视角分支模型参数共享,提升了处理实时性并降低了复杂度。同时,设计跨视角并行语义特征自编码器,通过传递跨视角上下文信息实现左右视角分支间信息交互,以降低视角间冗余。最终,在接收端对解码特征实现3DGS轻量化预测,渲染得到用户视角的视频图像,以满足沉浸式语义通信的实时性需求。
技术关键词
语义特征
视角
接收端解码
发送端
视差补偿
语义编码方法
编码器
通信系统
图像重建
解码器
比特流
参数
图像特征提取
视频
协方差矩阵
系统为您推荐了相关专利信息
通用特征
梅尔频率倒谱系数
文本段落
语义特征
采样率