摘要
本发明提供一种基于跨模态数据融合的业务识别方法、装置和电子设备,方法包括:获取目标业务的视觉图像数据、文本数据和时序数据;对视觉图像数据进行特征提取,得到视觉特征向量,对文本数据进行特征提取,得到文本特征向量,对时序数据进行特征提取,得到时序特征向量;将视觉特征向量、文本特征向量和时序特征向量输入至预先构建的特征融合模型,得到特征融合模型输出的融合特征向量;基于融合特征向量,对目标业务进行识别,得到目标业务的识别结果。本发明基于特征融合模型对多模态特征向量进行融合,提高了跨模态特征融合的效率和准确性,基于融合特征向量进行业务识别,效率高,准确性高,适用性强。
技术关键词
文本特征向量
业务识别方法
跨模态数据
样本
时序
视觉
动态门控
业务识别装置
标签
BERT模型
编码器
特征提取单元
图像块
电子设备
模态特征
处理器
系统为您推荐了相关专利信息
轨迹预测方法
数据关联技术
机场场面
轨迹预测装置
视频监控数据
维卡格雷
非线性混合模型
扣除技术
甲氧基苯乙酮
巯基
任务调度方法
节点
强化学习模型
任务分配模型
资源