摘要
本发明公开了一种基于多场景多模态大模型的质控方法及系统,包括:采集获取多场景多模态医学影像数据及其对应的病理和质控报告,并进行数据预处理;构建多模态医学影像预训练模型CLIP‑Med,通过对比学习机制将影像特征与文本特征进行多模态对齐、融合;构建多模态医学影像分割基础大模型MM‑SAM,结合交互式提示信息,获得分割后的医学影像;构建多部位质控项级别自动评估基础大模型,对分割后的医学影像质量进行多层次评分和分类评估;整合质量评分结果,生成多模态医学影像质控评估报告。本发明能够针对不同场景和模态的医学影像进行高效、精准的质量控制和评估,为医学影像的智能化分析提供有力支持。
技术关键词
多模态医学影像
文本编码器
图像编码器
预训练模型
多场景
表达式
质控方法
报告
医学影像数据
融合特征
多层次
影像编码器
基础
细粒度特征
质控系统
模型预测值
系统为您推荐了相关专利信息
语音识别模型
音频编码器
文本编码器
语义
大语言模型
地铁保护区
模型场景
作业机械
施工作业防护
识别方法
分类产品
提纯
滑动时间窗口
监督深度学习
滤波算法