结合多模态信息和人工智能的结构损伤识别方法及系统

本发明提供一种结合多模态信息和人工智能的结构损伤识别方法及系统，涉及结构检测技术领域，包括获取不同成像原理的图像信息和不同频域范围的声音信息，将图像信息输入图像特征提取模型，提取图像特征向量；将声音信息输入声音特征提取模型，提取声音特征向量；基于多模态特征融合模块，通过构建模态间的流形映射和流形对齐，将图像特征向量和声音特征向量投影到同一低维流形空间，得到融合特征向量；将融合特征向量输入结构损伤识别模型，结构损伤识别模型包括按照粒度由粗到细划分的多个识别子模型，基于各识别子模型的识别误差，结合注意力机制，自适应调节各识别子模型的输出权重，生成结构损伤识别结果。