用于计算基础平台的基于世界模型理解的端到端控制方法

本申请涉及一种用于计算基础平台的基于世界模型理解的端到端控制方法，其中，包括：获取当前车辆的多视角视频数据集、候选输入指令、地图信息和文本信息；根据多视角视频数据集生成多视角图像，并基于多视角图像、候选输入指令、地图信息和文本信息，根据预设的奖励函数，生成最优控制指令；根据多视角图像、地图信息、文本信息和最优控制指令生成多模态信息统一接口，并基于多模态信息统一接口对当前车辆进行端到端控制。由此，通过构建一个端到端的控制模型，直接从感知数据生成车辆控制信号，解决了现有技术难实现的由感知到控制的完全端到端自动驾驶、控制代价高和行驶风格不可定制等问题，提升了自动驾驶的效率。