摘要
本申请提供了一种驾驶辅助信息的处理方法、处理装置和电子设备,可以应用于智能驾驶和数据处理技术领域。该方法包括获取对话查询数据和车辆的环境图像,环境图像包括至少一个交通标志物;将对话查询数据和环境图像输入至编码器网络,输出与对话查询数据对应的提问语义特征、环境语义特征以及至少一个环境图像特征,编码器网络包括多模态模型的编码器和图像分割模型的图像编码器;将提问语义特征和环境语义特征输入至目标语言模型,输出文本潜在特征目标解码网络包括图像分割模型的解码器;将文本潜在特征和至少一个环境图像特征输入至目标解码网络,输出目标掩膜图像,以便根据目标掩膜图像生成用于对话查询数据的对话应答数据。
技术关键词
语义特征
图像编码器
图像分割模型
解码网络
标志物
驾驶辅助信息
掩膜
数据
交通
多模态
解码器
文本编码器
注意力
路段
系统为您推荐了相关专利信息
三维模型重构方法
深度图像数据
过鱼通道
三维重构模型
动态
视觉定位方法
反光
语义分割网络
相机外参
Softmax函数
应力场
重构方法
混合损失函数
数值
深度学习模型训练