摘要
本发明提供了一种基于多模态数据的工业场景自动化监控方法、系统及产品,涉及工业场景监控技术领域,方法包括:获取工业场景中的环境多模态数据,基于环境多模态数据对工业场景中的各个设备进行异常检测,以自然语言形式输出环境感知结果;基于环境感知结果获取对应各个设备的运行数据,得到各个设备在运行时不同运行参数间的实时关联性系数,以自然语言形式输出设备运行时的参数关联结果;对齐环境多模态数据和运行数据的时间信息,基于环境感知结果和参数关联结果对工业场景状态进行描述,以自然语言形式输出包括环境状态、设备状态和总体趋势的工业场景监控结果。本发明解决了工业场景监控中依赖工作人员所造成的效率低、易遗漏等问题。
技术关键词
自动化监控方法
多模态
自然语言文本
工业
数据
场景监控技术
红外热成像相机
参数
可见光摄像机
输入接口
矩阵
大语言模型
解码器
声成像
计算机程序产品
注意力
编码器
系统为您推荐了相关专利信息
动作捕捉系统
人体特征数据
神经网络模型
监测模块
数据处理模块
海洋石油污染
海洋环境数据
智能监测方法
荧光
海洋环境要素
智能培育系统
鲸鱼优化算法
环境监测模块
中央控制器
智能算法控制
异构数据汇交
动态知识图谱
融合方法
多源异构数据融合
语义