摘要
本申请提供了一种多模态点云压缩方法、点云压缩框架、设备以及存储介质,方法包括:对量化点云数据和多尺度图像特征进行空间对齐和通道对齐,以去除冗余,得到跨模态点云特征;将量化点云数据划分为多个点云数据组,依序对多个点云数据组进行不同尺度的基础特征重建,得到对应的基础点云解码数据;基于预设的多模态熵模型生成量化点云数据的空间分布信息,并对空间分布信息进行空间对齐和通道对齐,得到增强分布信息;根据增强分布信息和基础点云解码数据对量化点云数据的反量化特征进行增强特征重建,得到压缩点云数据,其中,本申请可以利用图像中的语义信息来辅助点云压缩,有效减少冗余信息,进而优化压缩点云数据的性能表现。
技术关键词
点云压缩方法
空间分布信息
点云特征
冗余
多尺度
原始图像数据
点云编码
通道
多模态
基础
检测损失
跨模态
计算机可执行指令
算术解码
码率
框架