摘要
本发明提供一种基于医学影像融合多元数据的诊断系统,数据获取模块获取包括医学影像、文本数据;影像特征提取模块从医学影像中提取影像特征数据;文本特征提取模块从文本数据中提取文本特征数据;思维链提示提取模块从思维链提示数据库中提取匹配的思维链提示数据;多模态特征融合模块使用大语言模型对影像特征数据、文本特征数据和思维链提示数据进行融合,得到全局特征融合数据;思维流诊断模块使用大语言模型处理全局特征融合数据得到病灶诊断结果以及诊断思维链数据。本发明可以减少无根据的推测和错误陈述的发生,降低幻觉现象,辅助医生了解模型诊断思考过程,提高诊断结果的可信度和临床实用性。
技术关键词
影像特征数据
诊断系统
特征提取模块
降噪模型
全局特征融合
文本
位置编码单元
多模态特征融合
大语言模型
医学影像设备
样本
数据获取模块
切片
降噪单元
数据收集单元
特征提取模型
去噪算法
系统为您推荐了相关专利信息
车道中心线
机器学习模型
特征提取模块
点云
图像
文本特征向量
图像特征向量
序列构建方法
噪声信息
网络结构
图像分割模型
图像分割方法
多层感知机
注意力机制
计算机可读指令
三角梅
多模态传感器
深度学习算法
分类方法
通道剪枝