一种多模态交互方法及装置

本发明提供多模态交互方法及装置，方法包括：步骤1、采集目标交互数据，所述目标交互数据包括交互者的眼动、手势、语音或生理数据中的至少两种；步骤2、对所述目标交互数据进行特征提取，生成特征交互数据；步骤3、根据预设规则对所述特征交互数据进行融合，生成目标特征向量；步骤4、根据所述目标特征向量识别交互意图；步骤5、根据所述交互意图和驾驶场景生成交互策略；步骤6、根据所述交互策略执行交互指令。本发明提升了交互的智能化水平，同时减少了交互者的手动操作，快速响应交互者的操作需求，降低了驾驶过程中的分心风险，提高了驾驶安全性。