一种基于仪表盘的多模态飞行预测方法

本发明公开了一种基于仪表盘的多模态飞行预测方法，包括：通过图像采集设备获取飞行器仪表盘图像及天气图像；对所述仪表盘图像进行参数识别获得仪表盘参数、天气类型结果；将识别后的所述参数与所述天气类型结果按时间戳整合，生成时序飞行数据的文件；基于Transformer编码器、LSTM网络及注意力机制构建多模态融合模型，以对所述时序飞行数据进行分析，输出飞行状态预测结果。由此，基于上述方法，最终通过多任务预测头同步输出未来5步飞行参数及状态分类（上升/下降/减速/保持），实现了从多维时序数据到飞行演化的端到端精准映射。本申请实施例的预测结果显然优于现有技术中的其他预测方法的结果。