摘要
本申请的实施例提供了一种基于神经网络的物体重建方法、装置、存储介质及电子设备,涉及物体建模技术领域,所述方法包括:获取物体的多视图图像以及稀疏3D点云;基于多视图图像对RGB多层感知机神经网络进行外观约束;基于稀疏3D点云对SDF多层感知机神经网络进行几何约束;然后将两个神经网络进行联合训练;基于稀疏3D点云,利用联合训练后的SDF多层感知机神经网络提取得到网格模型;将所述网格模型转换为3D高斯模型,并将物体真实图片作为监督信号,不断优化所述3D高斯模型。本申请的技术方案,通过多模态数据融合+双神经网络联合训练+隐式场表示+3D高斯精细化,实现了从稀疏/残缺输入到高保真重建的突破。
技术关键词
多层感知机
3D点云
网格模型
物体
高斯分布预测
颜色
图像
多模态数据融合
计算机
图片
电子设备
建模技术
深度相机
符号
存储器
转换单元
指令
结构光
射线
误差
系统为您推荐了相关专利信息
自动生成方法
特征数据库
Word2Vec模型
代码结构
深度学习模型训练
视频字幕生成方法
融合语义
动作特征
分层
生成字幕
边框特征
纹路特征
评分特征
翻拍图像识别方法
融合特征
景观
自动观测方法
轮廓特征
数字图像处理技术
数据