摘要
本发明的一种基于多模态数据的智能交互意图识别方法及系统,构建基于用户的多智能环体识别架构,多智能环体识别架构包括若干个不同直径的同心环体;采集用户的多模态数据,对多模态数据进行预处理,按照多模态数据种类的不同分别映射到不同同心环体的圆周面上;分别计算多模态数据位于同心环体上的静态特征以及动态特征,对静态特征和动态特征进行融合,获得融合特征;将融合特征输入意图分类模型中,识别得到用户意图;多模态数据可以映射到不同的同心环体上,解决跨模态之间的时空错位问题,而同心环体可以进行转动,动态调节各模态数据的相对位置,以便于精准计算静态特征和动态特征,并进行融合后用于进行用户意图的精准识别。
技术关键词
意图识别方法
多模态
静态特征
意图分类模型
融合特征
数据
动态
可穿戴终端
长短期记忆网络
校准
关键帧
意图类别
序列
图像
跨模态
场景
语音
训练集
系统为您推荐了相关专利信息
监管方法
生成数字签名
多模态深度
识别垃圾
深度学习算法
决策优化方法
线性回归模型
强化学习策略
特征降维方法
引入注意力机制
旱情预测
历史监测数据
可视化监测方法
可视化监测系统
广义线性模型