摘要
本发明公开基于多模态遮挡感知评分的非静态场景重建方法及其系统。该方法通过多视图图像的三维重建生成几何一致性分布图、静态特征点、几何先验掩码;融合几何先验掩码与语义分割模型提取语义掩码及融合语义特征图;基于静态特征点正点提示和遮挡区域负框提示引导图像分割模型生成候选掩码并使用网格互补融合法优化一致性;构建多模态遮挡评分模块,融合多源特征输出二值静态掩码;利用静态掩码约束神经辐射场训练,抑制动态干扰并优化静态场景重建。本发明通过多模态信息协同感知静态区域,提升掩码生成的鲁棒性与精准性,有效抑制动态元素对神经辐射场建模的干扰,实现非静态场景的高质量三维图像重建与新视图合成。
技术关键词
场景重建方法
融合语义
静态特征
语义分割模型
多模态
图像分割模型
场景三维点云
机器可读存储介质
网格
抑制动态干扰
多尺度语义特征
场景重建系统
融合多源特征
像素点
度量
系统为您推荐了相关专利信息
TextRank算法
关键词
主题
协同过滤算法
节点
饲料智能
投喂系统
融合特征
强化学习算法
多模态
林木病虫害
松树线虫病
多模态融合深度学习
定位方法
时间序列信息