一种融合多模态信息的冶金高炉料面状态监测方法和系统

本发明提供一种融合多模态信息的冶金高炉料面状态监测方法和系统，包括：将RGB时序图像序列与多光谱时序图像序列输入多模态数据融合与数字化表征模块，对各个时刻图像逐帧进行多模态数据融合，采用局部与全局相结合的方式提取多尺度图像特征，并通过跨模态特征交互实现多源图像的深度融合，生成高维融合图像特征，结合传感器参数知识库与混合专家模型的指导作用，对高维融合图像特征进行动态数字化表征；将数字化表征序列与多传感器时序数据输入多变量时序分析模块，对二者相结合构建统一的多变量时序分析框架，充分挖掘不同模态数据间的时间依赖性和交互特性，进行料面的精细化状态判断，生成料面状态分析序列。本发明可以对料面状态进行监测。