摘要
本申请实施例提供的设备状态识别方法、装置、设备及存储介质,获取目标设备运行过程中的多模态数据,多模态数据包括图像数据、文本数据和温度数据;通过特征提取模型对多模态数据进行特征提取与嵌入编码得到各模态的嵌入向量,将各模态的嵌入向量对齐至统一的目标语义嵌入空间;通过模态注意力机制,根据目标设备的状态特征调整各模态的融合权重,根据各模态的融合权重对各模态的嵌入向量进行融合构建多模态融合向量;根据多模态融合向量通过识别模型识别目标设备的状态和/或进行异常风险预警。通过引入模态注意力机制,实现图像、文本和温度模态的动态加权融合,显著提升了状态识别的准确性和泛化能力,提升模型在复杂工况下的准确性和鲁棒性。
技术关键词
特征提取模型
多模态
设备状态识别方法
温度分布图像
计算机执行指令
注意力机制
数据
图像块
空间坐标信息
编码
文本处理模型
状态识别装置
语义特征
跨模态
可读存储介质
特征提取模块
系统为您推荐了相关专利信息
验证特征
独立特征
护栏板
参数优化模型
分布特征
隧道排水管道
多模态传感器
光学图像数据
三维卷积神经网络
三维点云数据
仿生纳米结构
防伪结构
片状纳米
多模态方式
基底
模型部署方法
计算机执行指令
框架
处理器
可读存储介质
智能产线
无刷电机
工艺失效模式
监控设备
边缘检测