摘要
本发明提供的融合大语言模型与热力图注意力的在线矢量地图构建方法及电子设备,包括获得多摄像头采集的图像并提取图像的特征图后将特征图转换为BEV特征,通过池化操作对BEV特征进行优化;对优化后的BEV特征分离动态对象和静态对象和标注语义类别得到BEV语义特征并结合大语言模型的知识库对BEV语义特征进行语义增强;用语义增强后的BEV语义特征生成热力图并在热力图中生成查询点,利用BEV语义特征和查询点构建矢量地图;对矢量地图进行质量评估并基于评估结果进行误差优化。本发明能够针对复杂动态环境,通过优化多视角图像的特征融合能力,精准区分静态对象与动态对象,提升对环境的语义理解能力,来构建出高精度的矢量地图。
技术关键词
矢量地图
语义特征
大语言模型
地图元素
交叉注意力机制
生成热力图
对象
在线
置信度阈值
动态
优化地图
像素
电子设备
感兴趣
位置映射
解码器
图像
系统为您推荐了相关专利信息
推理系统
语义
执行冲突检测
模拟模型
确定性规则
三维重建方法
电网设备
激光雷达点云数据
图片
描述符
智能数字助理
智慧管理方法
工程建设管理
大语言模型
市政基础设施工程
高质量重建方法
高频特征
特征提取模型
交叉注意力机制
计算机程序代码
数据持有证明方法
分片
语义相似性约束
多模态
语义特征提取