摘要
本发明提供基于智能网联汽车车载交互实训平台的多模态交互方法及实训平台,该方法包括:响应汽车车载人机交互界面的交互指令,基于交互指令获取多模态数据;基于语音交互数据和手势交互数据,构建用户交互空间坐标;基于车辆行驶状态对语音交互数据、手势交互数据和触摸交互数据进行干扰分析与筛选,得到目标交互数据;基于用户交互空间坐标对目标交互数据进行融合,得到融合特征数据;对融合特征数据进行分类识别,得到目标交互指令,并基于目标交互指令,触发被控对象执行指令操作。本发明降低了复杂真实场景下语音、手势、触摸等交互方式之间的干扰,且减少了信号混淆的状况,解决了多人同时实训时因用户特征不同导致的识别难度大问题。
技术关键词
智能网联汽车
实训平台
车辆行驶状态
数据
交互方法
车载人机交互
融合特征
坐标
融合策略
手势特征
指令
多模态
语音特征
车辆座舱
非暂态计算机可读存储介质
节点
模式