摘要
本发明提供了一种多模态特征融合的无参考点云质量评价方法,属于三维点云质量评价领域。所述方案包括数据预处理步骤,特征提取步骤,特征融合步骤,特征回归步骤。首先将点云进行两种预处理,一是将点云分解为子模型,二是摄像机围绕点云旋转生成动态视频。再将得到的点云子模型和动态视频分别送入特征提取单元,在特征提取阶段,从点云子模型中提取几何畸变特征,从动态视频中提取空间特征和时间特征。然后进入特征融合阶段,利用新的跨模态注意力模块融合空间特征、时间特征和几何畸变特征得到最终质量感知特征,最后,使用两重全连接层将最终质量特征回归到预测的质量分数。
技术关键词
畸变特征
评价方法
点云
多模态特征融合
注意力
卷积网络模型
令牌
K近邻算法
全局平均池化
关键帧
感知特征
空间特征提取
视频
跨模态
特征提取单元
图像编码器
核心
动态
摄像机
锚点
系统为您推荐了相关专利信息
定位控制方法
视觉
混合深度学习模型
注意力机制
双线性插值
视觉引导系统
智能机器人
感兴趣区域图像
翻车机
供水控制器
视频
视觉
生成方法
TextRank算法
标签文本