摘要
本发明公开了基于多模态感知的雾天驾驶增强现实辅助方法及系统,涉及智能驾驶技术领域。该方法包括:构建三维环境地图进行实时驾驶风险预测,并根据设定规则对三维环境地图中的数据源权重分配进行初步调整;采用PPO强化学习算法对数据源权重分配进行再次调整,基于再次调整后的数据源权重构新的三维环境地图,使用分层投影策略将实时预测的前车急减速的风险概率和重构后的三维环境地图投影至挡风玻璃以提示驾驶员。本发明能够在雾天环境下获得准确、全面的多模态感知数据,确保决策和风险预测的准确性,能够根据环境的变化做出快速响应,提升驾驶员在复杂天气条件下的安全性,在实际应用中能适应更多变化的环境。
技术关键词
三维环境地图
分析传感器数据
红外热成像仪
多模态
激光雷达点云数据
强化学习算法
能见度
挡风玻璃
策略
交通标志信息
风险
车道线信息
尾气浓度变化
显示危险区域