摘要
本申请公开了一种基于多模态特征的识别方法、电子设备和可读存储介质,该方法包括:获取待识别目标主模态对应的主信息和至少一种辅模态对应的辅信息,将主信息输入主模态识别网络,得到主特征,将辅信息输入对应的辅模态识别网络,得到辅特征;其中,辅特征为区别于主特征的差异特征,主模态识别网络是利用主模态匹配的单模态特征训练得到的,辅模态识别网络是利用参考融合特征训练得到的,参考融合特征是所有模态各自匹配的单模态特征消除冗余特征后融合得到的;将主特征与辅特征融合,得到目标融合特征,基于目标融合特征确定待识别目标的目标识别结果。通过上述方式,本申请能够提高目标识别的效率和准确率。
技术关键词
融合特征
多模态特征
识别方法
冗余特征
叠加特征
网络
电子设备
程序
处理器
参数
可读存储介质
存储器
数据
计算机
生物
系统为您推荐了相关专利信息
基因表达数据
推断方法
构建基因调控网络
学习器
融合特征
轴承故障诊断方法
特征加权融合
故障诊断模型
多尺度
通道注意力机制
智能家电
电磁波干扰抑制
实时语音
电磁干扰数据
语音识别方法
桥梁健康监测
重构模型
异常数据
卷积神经网络模块
双向长短期记忆网络
图像重建
算法
监督深度学习
注意力
计算机断层图像