摘要
本发明公开了一种基于空时自适应聚合架构的室内场景重建方法,首先将不同视角下的多尺度信息放在一起,使得其在空间上是一致的。即空间域下的多尺度编码。接着,本发明采用一个多层感知机,将每个视角下的空间域多尺度信息到编码到特征域上。在特征域中,本发明采用积分网络进行视图聚合。从而将离散的空间视图信息聚合到特征体中。采用一个滑动窗口动态的聚合时间视图信息。在聚合完成后通过一个MLP网络回归最终的三维模型截断符号函数TSDF表达。本专利通过将离散的特征连续化,并用积分神经网络进行学习和推理聚合函数,这样能够大大提升系统的鲁棒性。
技术关键词
室内场景重建方法
滑动窗口
空间特征信息
关键帧
视角
三维模型
投影模型
特征金字塔网络
多尺度特征提取
立方体
坐标
视频流
多层感知机
图像投影
信息编码
符号
提升系统
顶点