摘要
本发明提供了一种基于自适应多模态特征融合的NeRF稀疏视图重建方法,涉及三维场景重建技术领域。该方法包括:从稀疏输入视图中提取深度特征与语义特征,通过特征增强网络生成第一多模态特征;采用混合注意力机制结合通道与空间注意力对特征进行双重选择性增强,得到第二多模态特征;基于置信度引导的权重分配网络动态融合多模态特征,并通过一致性损失函数调和模态间冲突,生成最终融合特征;将融合特征输入增强型神经辐射场渲染模块,利用分层特征编码分解场景为多尺度表示,结合渐进式训练策略分阶段优化几何与外观细节,实现高质量三维重建。本发明解决了传统方法因视图稀疏导致的几何畸变、纹理模糊及模态不一致问题。
技术关键词
多模态特征融合
语义特征
融合特征
分层特征
三维场景重建技术
融合多模态特征
分辨率
特征加权融合
注意力机制
层级
解码器架构
多模态信息
编码器
表达式
通道
分阶段
特征金字塔
系统为您推荐了相关专利信息
跨模态融合特征
语义
模态特征
深度神经网络
注意力机制
环境建模方法
场景特征
智能安防
拓扑特征
构建三维场景
数字孪生模型
能源系统
数据特征提取
储能设备
光伏发电数据
非结构化文本
节点特征
特征融合技术
收入
强化学习算法