摘要
本发明公开了一种多模态数据的数据修复方法、装置、设备及介质,包括:提取多模态数据中的数据特征,得到初始特征向量;对初始特征向量进行向量对齐处理,得到目标特征向量;采用动态加权的多头自注意力模块对目标特征向量进行识别,确定缺陷数据位置;对目标特征向量进行拼接,得到特征矩阵;采用生成对抗网络,基于缺陷数据位置对特征矩阵进行定位修复,得到修复数据。采用本发明可以提高数据修复的精度。
技术关键词
数据修复方法
数据修复装置
注意力
多模态
短时傅里叶变换
生成对抗网络
矩阵
模态特征
梅尔频率倒谱系数
对齐模块
编码
离散余弦变换
定位模块
可读存储介质
声谱
特征提取模块
拼接单元
处理器
系统为您推荐了相关专利信息
通信方法
低功耗
降噪算法
动态噪声
多模态传感器
粉碎设备
频域特征
时域特征
智能检测方法
智能检测系统
语义向量
语义分析模型
语义检索方法
语句
语义特征提取
模态特征
多模态数据融合
交叉注意力机制
门控神经网络
融合特征