摘要
本发明属于变压器故障推理领域,公开了基于知识图谱增强的多模态变压器故障溯因推理方法及相关系统,本发明结合了变压器的图像信息和对应的文本描述数据(即多模态数据),通过将图像块转化为高维向量,并与文本信息融合,实现了更全面的信息表达。图像和文本信息的联合处理增强了模型的推理能力,使得预测结果更加精准。本发明使用Transformer自注意力机制模型,能够有效地从图像高维向量中提取视觉特征,并从图像嵌入高维向量中提取图像知识图谱信息。自注意力机制通过关注不同区域的关系,能够捕捉到更丰富的特征,减小因图像局部特征而导致的误差。
技术关键词
图像嵌入
变压器
推理方法
注意力机制
图谱
旋转框
文本
推理系统
图像块
图片
视觉特征提取
拼接模块
图像局部特征
关系
数据采集模块
尺寸
系统为您推荐了相关专利信息
流行度预测方法
视频
上下文特征
特征提取网络
序列特征
结构化日志数据
输入向量集合
分析方法
异构
账户
关系
注意力机制
融合语义
预训练语言模型
损失函数设计
货车检测方法
YOLO模型
输出特征
特征提取网络
专用数据集