摘要
本申请提供了一种控制车辆的方法、训练多模态模型的方法、装置及车辆,涉及人工智能领域,具体涉及车辆控制、深度学习、自动驾驶等技术领域。该控制车辆的方法包括:接收用于车辆行驶的多模态感知数据;基于提示词,利用经训练的多模态模型基于多模态感知数据对车辆进行行驶动作规划,得到用于未来指定时段的行驶动作信息,行驶动作信息表示车辆的行驶动作,其中,提示词用于控制多模态模型将行驶动作信息作为目标,对多模态感知数据进行语义理解;以及基于行驶动作信息控制车辆行驶。
技术关键词
多模态
样本
嵌入特征
融合特征
速率
车辆
感知特征
坐标系
规划行驶轨迹
标签
语义
注意力机制
数据接收模块
处理器
数值
文本
计算机
系统为您推荐了相关专利信息
接触网绝缘子
破损检测方法
分层特征提取
编码模块
编码器
网状裂纹
异常检测方法
通信链路
坝体
异常检测系统
语音识别模型
文本
实体
样本采集方法
计算机程序指令