摘要
本发明涉及一种基于混合模式的医学数字切片报告自动生成方法,包括:获取数字切片‑报告数据集,对数字切片‑报告数据集中的报告部分进行处理,获取数字切片‑问答数据集;对多模态模型进行训练;将多模态模型部署在服务器上;获取针对数字切片的问答对;根据数字切片的问答对,对大语言模型进行微调;并根据微调后的大模型生成医学诊断报告。本发明的有益效果是:本发明不依赖于大量的模板设计,而是通过结合模板方法和神经网络方法,这使得模型能够处理更多种类的医学切片,并生成针对性的诊断报告,提高了模型的灵活性和适应性。并且,本发明在深度神经网络自动生成诊断报告的基础上,对产生报告的细节有所把控。
技术关键词
数字切片
报告自动生成方法
生成医学诊断
视觉特征提取
文本编码器
大语言模型
解码器
计算机存储介质
门结构
多模态
数据
自动生成系统
模式
神经网络方法
融合特征
注意力
模板方法
系统为您推荐了相关专利信息
图文检索方法
语义
跨模态
预训练模型
特征提取能力
文本编码器
特征提取网络
模型异常检测方法
图像特征提取
融合特征
报告自动生成方法
数据接口
智能客服系统
人机交互界面
模板
令牌
语义分割网络
图像语义分割方法
融合特征
掩膜