摘要
本申请公开了一种多模态数据融合方法、装置、设备及存储介质,涉及多模态数据融合技术领域,包括:获取目标全切片图像以及目标临床数据,并基于目标临床数据获取相应的临床特征信息;利用目标多模态融合诊断模型和各预设变换函数获取目标全切片图像对应各初始特征信息,并对各初始特征信息进行加权融合操作,以获取图片特征信息;基于预设注意力门控机制动态调整临床特征信息和图片特征信息的权重,并对临床特征信息和图片特征信息进行自适应融合,以得到目标多模态特征。通过利用注意力门控机制控制不同模态的数据进行自适应融合,使得不同模态的数据能够自适应调整权重进行融合,提高了多模态特征的可靠性,进而提高了疾病诊断结果的准确性。
技术关键词
图片特征信息
数据融合方法
多模态特征
切片
多模态数据融合
图像
残差学习
动态
数据获取模块
注意力机制
可读存储介质
处理器
电子设备
框架
系统为您推荐了相关专利信息
视频检测方法
关键帧
视觉特征
多模态特征
情感特征
智能管理系统
动态知识图谱
语义
知识图谱构建
模块
人脸识别方法
卷积神经网络提取
深度神经网络
人脸识别系统
模态特征
深度神经网络模型
裂纹扩展速率
材料设备
深度特征学习
应力场