摘要
本发明涉及情感识别领域,特别涉及一种多模态情感识别方法,采用特征桥接的方法,将包含有文本信息以及图像信息的全局特征表示以及单模态特征表示进行特征桥接,获得特征桥接表示,实现了自下而上的跨模态对齐以及信息融合,将基于单模态特征表示构建的特征桥接表示进行跨模态特征交互,对文本特征信息以及图像特征信息进行充分感知,提取与情感识别相关的特征信息,用以进行情感识别,提高情感识别的精准度以及效率。
技术关键词
特征提取模块
多模态特征融合
图像全局特征
跨模态
桥接模块
文本
情感识别方法
全局特征提取
情感识别模型
矩阵
识别模块
特征提取算法
注意力
数据
多模态情感识别
系统为您推荐了相关专利信息
货币识别方法
计算机程序产品
货币识别装置
样本
节点特征
二维图像特征
故障诊断模型
故障诊断方法
训练特征
二维卷积神经网络
特征提取网络
数据检测方法
图像
车载互联技术
预测类别
传送带
LED阵列光源
高光谱相机
可见光相机
分拣机构
可见光图像
火灾特征
多模态环境
HSV色彩空间
成像特征