摘要
本申请公开了一种基于网络数据重建的智能驾驶仿真场景生成方法、装置、设备及存储介质,涉及智能驾驶技术领域,包括:获取多模态数据;将多模态数据通过编码器进行数据编码,得到多模态数据的关键特征;将关键特征进行特征处理,得到优化后的关键帧特征;将关键帧特征输入交叉注意力层,得到道路场景视频;对道路场景视频进行三维高斯泼溅处理,得到三维重建后的智能驾驶仿真场景,通过收集大量网络公开的道路场景数据,基于多模态大模型技术、3DGS(三维高斯泼溅)对场景重建,进而可生成大量的、逼真的、高质量的可用于进行仿真测试、仿真训练的道路场景。
技术关键词
驾驶仿真场景
生成方法
关键帧
多模态
智能驾驶感知
运动恢复结构
点云
网络
视频
数据编码
相机位姿估计
智能驾驶技术
融合特征
注意力
编码器
机器学习算法
关键点
数据获取模块
系统为您推荐了相关专利信息
三维虚拟场景
特征描述信息
校正策略
生成方法
融合深度图像
融合情感特征
动作生成方法
个性化特征
多模态
动作生成程序
健康评估方法
深度学习模型
多传感器数据融合
多任务
身份
关联特征数据
多尺度特征提取
多通道数据采集单元
病理图像特征提取
多源异构数据
地质土层
生成方法
三维地形模型
三维地质模型
坐标系