一种多模态人机交互的性能评估方法及系统

本发明属于人机交互技术领域，提供了一种多模态人机交互的性能评估方法及系统，包括：获取实时的多模态人机交互数据，其中，所述多模态人机交互数据至少包括手势、眼部、语音交互数据以及用户生理信号；对所获取的多模态人机交互数据进行预处理，得到目标交互数据；提取所得到的目标交互数据中的手势特征数据、眼部特征数据、语音特征数据以及用户生理特征数据；根据所提取到的手势特征数据、眼部特征数据、语音特征数据以及用户生理特征数据，以及基于长短期时间记忆网络的性能评估模型进行多模态人机交互的性能评估，得到多模态人机交互的性能的评估结果。