摘要
本申请公开了一种图像三维重建方法、自由视点视频生成方法及电子设备,该图像三维重建方法包括:获取不同视角下对同一场景采集得到的多路输入图像,对多路输入图像进行语义特征编码和语义特征解码,得到点云映射关系;利用点云映射关系对多路输入图像分别进行点云转换,得到多路输入图像分别对应的点云数据;结合多路输入图像分别对应的点云数据进行稀疏三维重建,得到稀疏重建结果;基于多路输入图像对稀疏重建结果含有的每个二维面元进行渲染,得到目标三维重建结果,可以充分结合图像的高级语义信息和低层图像特征,依次实现由粗到细的三维重建,不用进行前置标定,且可以在稀疏视角下也能实现鲁棒性较高的三维重建。
技术关键词
多路输入
生成自由视点视频
语义特征
视频生成方法
图像三维重建方法
相机
图像解码器
神经网络模型
图像编码器
点云
画面
电子设备
样本
视角
三维模型
关系
图像块
系统为您推荐了相关专利信息
放疗设备
感知损失函数
图像识别模块
联合损失函数
抑制算法
组件生成方法
语义向量
语义特征
组件结构
路径结构
通信方法
通信系统
深度学习模型
噪声
编码器参数
美学
有序加权平均算子
评价方法
多层次语义特征
多分支