摘要
本发明公开了一种基于电力场景的多模态数据融合方法、装置及存储介质,其中方法包括:获取电力场景的多模态数据,对多模态数据进行编码处理得到多模态特征,将多模态特征转换为相同维度的特征向量;对特征向量添加编码信息,得到编码后特征向量;基于编码后特征向量中的特征块生成多种掩码矩阵,将所有掩码矩阵组合成完整掩码矩阵;将编码后特征向量中的特征块拼接成统一特征矩阵,将统一特征矩阵输入至Transformer编码器,使Transformer编码器根据完整掩码矩阵对统一特征矩阵中的多模态特征进行融合处理,得到融合数据。本发明能够深入挖掘不同模态之间的潜在关系,从而能够有效提高多模态数据融合效果。
技术关键词
掩码矩阵
数据融合方法
多模态特征融合
数据融合装置
场景
电力
编码器
多模态数据融合
可读存储介质
文本
参数
图像
标识符
计算机
系统为您推荐了相关专利信息
环境感知数据
场景类别
数据处理模型
感知数据处理方法
分支
机器人关节电机
电机运行状态
高精度控制方法
电机旋转角度
数字孪生模型
索引
扩展存储空间
空闲存储空间
空间分配方法
关系
智能箱式变电站
监控方法
数字孪生
避雷器监测数据
远程监控中心