一种用于区分外阴硬化性苔藓和外阴慢性单纯性苔藓的多态模型

本发明属于计算机辅助诊断和医学图像处理领域，具体涉及一种用于区分外阴硬化性苔藓(vulvar lichen sclerosus,VLS)和外阴慢性单纯性苔藓(vulvar lichen simplex chronicus,VLSC)的多模态模型。该模型通过将患者的病史信息和待查病变区域的图像特征进行融合，强化了输入信息的特异性，解决了单纯利用图像特征区别VLS和VLSC精度不高的问题。具体而言，本发明首先对与外阴白色病变相关的病史信息进行量化，形成病史信息向量；其次，采用ResNet50模型对病变区域图像进行特征提取，每个特征通道进行flatten操作，形成一个特征图向量；第三，对病史信息向量和每个特征图向量都进行Layer Normalization操作，并将更新后的病史信息向量拼接在每个更新后的特征图向量之后，形成融合信息向量；最后，采用Transformer模型，以融合信息向量为token进行训练，得到具有较高精度水平的，能够对VLS和VLSC进行风险评估的多模态模型。