基于多模态数据的隧道衬砌密实性缺陷检测方法及系统

本发明提供了一种基于多模态数据的隧道衬砌密实性缺陷检测方法及系统，涉及隧道衬砌检测技术领域，所述方法包括通过地质雷达对隧道衬砌进行初步质量检测，得到待检测的密实性缺陷；获取已检测和待检测的密实性缺陷的多模态数据；对多模态数据进行特征提取与编码处理，得到多模态嵌入表示；基于多模态嵌入表示进行异构图建模与跨模态对比学习，得到图结构；基于稀疏注意力机制和多模态融合对图结构进行联合处理，得到嵌入向量；基于扩散映射对嵌入向量进行缺陷类别分类，得到待检测的密实性缺陷的分类结果，所述分类结果包括混凝土不密实缺陷、填充块石缺陷和洞渣缺陷。本发明解决了现有单一模态的检测方法难以识别密实性缺陷的具体类型的问题。