摘要
本发明公开了基于多模态数据与在线学习驱动的飞行员操纵能力评估方法及系统,包括:确定输入参数集合,建立飞行视觉时序融合网络,提取参数集合的各特征。通过注意力机制和全局聚合完成多模态数据的特征融合。构建飞行员操纵能力评估架构,通过设计基于综合评分误差、子评分一致性约束的损失函数,生成离线飞行员操纵能力评估模型。利用滑动窗口机制对实时生成的飞行数据和眼动数据流进行分片与预处理,针对实时评分需求设计基于剪枝和参数量化技术的轻量化模型,将离线飞行员操纵能力评估模型中特征表达能力迁移至轻量化在线评估模型。本发明可用于改进飞行员培训方案,优化驾驶舱的人机界面设计,提高飞行操作的效率和安全性。
技术关键词
能力评估模型
滑动窗口机制
能力评估方法
多模态
离线
注意力机制
眼动数据
误差
在线
注视点
特征提取模块
一维卷积神经网络
时序
人机界面设计
能力评估系统
优化器
飞行状态参数