摘要
本发明涉及意图识别技术领域,具体提供一种多模态的深度语义意图识别方法、系统、设备及存储介质,包括:获取文本数据,并从所述文本数据中提取多层文本语义信息;获取图像数据,并从所述图像数据中提取多层图像语义信息;利用跨模态注意力机制将所述多层文本语义信息和多层图像语义信息融合为特征向量;利用分类器识别所述特征向量对应的意图类别。本发明通过关注层次化特征,解决传统模型因忽略语言层级结构导致的语义偏差问题,提升了意图识别的准确性。
技术关键词
语义意图识别方法
多模态
依存句法分析
词语
注意力机制
门控循环单元
意图类别
图像特征向量
跨模态
生成语句
特征提取模块
网络结构
意图识别技术
文本数据提取
图像数据分割
系统为您推荐了相关专利信息
时间同步
多模态影像数据
电力变压器
时空同步方法
可见光相机
数据管理平台
时空注意力机制
订单
转移概率矩阵
动态
融合图像特征
多模态数据融合
交叉注意力机制
时序分析模块
融合多模态信息
预警系统
动静脉
压电微机械超声换能器阵列
数据处理模块
探头模块