摘要
本发明公开了一种基于多模态深度神经网络的故障监测方法及装置,属于人工智能技术领域,该方法为:实时采集电网设备的多模态运行数据;对多模态运行数据进行数据预处理,得出多模态标准数据;利用深度神经网络在多模态标准数据中提取多模态特征数据;对多模态标准数据进行跨模态关联分析,得到多模态关联信息;基于历史故障数据对多模态特征数据进行加权融合,得出加权融合特征;构建多个关联特征,并根据多模态关联信息对各关联特征进行加权融合,形成加权关联特征;融合加权融合特征和加权关联特征,形成组合特征;将组合特征输入至预构建多任务学习网络,得出故障监测结果。本发明能够解决现有技术存在的故障检测准确度低的问题。
技术关键词
故障监测方法
多模态特征
多任务学习网络
深度神经网络
可见光视频
ROI图像
历史故障数据
电网设备
音频特征
DenseNet网络
融合特征
特征关联分析
驻极体麦克风
Retinex算法
云台摄像机
系统为您推荐了相关专利信息
金属表面缺陷
阻抗特征
电磁
融合特征
多模态特征融合
分类查询方法
神经网络对图像
索引
特征融合方法
验证机制
空间关系分析
融合策略
构建深度神经网络
训练深度神经网络
站点
图像缺陷检测方法
图像像素
网格变形方法
图像块
电路板行业
动态识别系统
数据处理模块
步态特征提取
生物特征信息
数据采集模块