摘要
本发明提供消化道早癌病灶检测模型构建方法及系统、设备、介质,该方法包括步骤:构建多模态内镜图像数据集并在各模态下训练早癌病灶检测模型;训练任意内镜模态之间可相互转换的生成模型;生成模型评估及优化;筛选对应匹配的内镜模态图像;生成模型补足缺失模态图像并融合各模态检测结果以构建消化道早癌病灶高效检测模型;利用部分模态图像训练病灶检测模型并通过知识蒸馏(迁移)提升检测性能。本发明在生成式网络的辅助下,充分发挥基于多模态图像的消化道早癌病灶检测模型潜力,能够在获取多模态内镜检查图像受限的应用场景中(尤其是在仅能获取到WLI图像的情况下),提升消化道早癌病灶检出率,可有效防止漏检。
技术关键词
检测模型构建方法
生成网络模型
学生
多模态
教师
检测模型训练
蒸馏
感知损失函数
风格
检测网络模型
白光
Softmax函数
概率分布建模
集成学习策略
数据
生成输出图像
模型构建系统
生成式网络