摘要
本发明实施例公开了一种基于多模态数据融合的数据分析方法及相关设备,涉及机器学习及数据分析技术领域,方法包括:针对目标人员的语音信息,通过自然语言处理技术获取所述目标人员的主诉数据;通过预设深度学习模型对目标人员的医学影像信息进行分析,得到所述目标人员的放射学报告;将所述主诉数据和所述放射学报告输入基于单层多头注意力机制的初诊模型,得到初诊结果;获取所述目标人员的历史就诊数据,并基于所述历史就诊数据构建历史病例知识图谱;利用就诊模型对所述初诊结果和所述历史病例知识图谱进行嵌入学习,得到诊断建议;将所述诊断建议输入领域专家知识库,以对所述诊断建议进行校验。
技术关键词
多模态数据融合
医学影像信息
数据分析方法
深度学习模型
多头注意力机制
影像特征数据
报告
内存
自然语言
信息采集模块
解码器
图谱
声学建模方法
缩放参数
语音
单层
数据分析系统
数据分析技术
实体
系统为您推荐了相关专利信息
虚假数据检测方法
新能源电网
能源监测系统
系统性能参数
逻辑
内容流行度预测方法
文本
模态特征
样本
斯皮尔曼等级相关系数
渗漏检测设备
通用飞机
超声波检测传感器
调控组件
气体分析传感器
驾驶安全控制
电单车头盔
视频摄像头
无线通信网关
鱼眼相机
绝缘子串
异常检测方法
深度学习模型
判断绝缘子
检测时间间隔