摘要
本公开提供了一种基于动态高斯建模的多模态数据融合方法、装置和车辆。本公开一实施例中,基于动态高斯建模的多模态数据融合方法包括:获取连续多帧多模态数据,通过多模态数据获得3D体素特征和多视角图像特征,基于3D体素特征构建动态高斯参数化模型,利用动态高斯参数化模型和多视角图像特征生成多视角高斯特征并将多视角高斯特征投影至动态分辨率BEV空间,从而获得BEV特征,3D体素特征采用动态体素化得到,并且该动态体素化基于八叉树稀疏体素编码并根据场景复杂度自适应调整分辨率。本公开能够在保证感知精度的同时优化计算资源利用率。
技术关键词
多视角
数据融合方法
动态
语义标签
全球导航卫星系统
联合损失函数
多模态
数据融合装置
GNSS数据
分辨率
图像
车辆状态信息
障碍物运动预测
特征提取单元
高精度地图
深度学习模型
车辆控制指令
参数
系统为您推荐了相关专利信息
定位夹持工装
边缘轮廓
真空吸盘
夹持组件
真空发生器
轻量化神经网络
动作捕捉设备
卷积生成对抗网络
曲线
面部
开关管驱动电路
驱动芯片
负载电路
电容可调
支路