摘要
本发明公开了基于改进多模态视觉语言模型的桥梁病害检测方法及系统,该方法包括:获取历史的桥梁原始图像,所述桥梁原始图像为包括桥梁悬浇段、现浇段、腹板、横隔板、合拢段和混凝土箱梁的图像;构建改进的多模态视觉语言目标检测模型;基于所述桥梁原始图像,对所述改进的多模态视觉语言目标检测模型进行训练,得到训练好的改进的多模态视觉语言目标检测模型,作为桥梁病害检测模型;获取待检测的桥梁图像,基于SAHI滑动窗口机制将所述待检测的桥梁图像划分为多个重叠的图块;基于所述桥梁病害检测模型对每个图块在局部区域内进行检测,得到区域检测结果;基于每个区域检测结果,通过拼接和融合的方式生成全局检测结果。
技术关键词
桥梁病害检测
特征融合网络
注意力机制
视觉特征信息
多模态
图像特征信息
特征提取器
文本
滑动窗口机制
混凝土箱梁
特征描述信息
链路
特征提取网络
病害特征
矩阵
系统为您推荐了相关专利信息
智能故障诊断方法
脉冲神经网络模型
电阻抗成像技术
对比度
智能故障诊断技术
基站
融合时空信息
时域卷积网络
时序特征
网络层次结构
嵌入式平台
热力图
多尺度特征提取
阈值分割算法
图像
网络通信状态
公有云
数据
模型更新
机器人自动化控制