摘要
本发明提供基于多模态信息融合的隧道喷浆智能检测方法及系统,通过至少三种不同类型的传感器实时采集喷浆层的视频图像数据、声波检测信号数据以及振动信号数据;并提取数据中的多个数据特征;通过深度学习框架中的特征融合层将不同模态的特征映射到一个共享空间中;在共享空间中引入跨模态注意力机制学习所述多个数据特征,输出各数据特征之间的相关性信息;基于所述相关性信息和与多个数据特征对应的权重确定喷浆质量评分,以当所述喷浆质量评分低于阈值时,发送警报信息至预设的设备端口,通过特征提取、特征融合、跨模态注意力机制和喷浆质量评分等步骤,提高了喷浆层质量评估的准确性,并能够及时发现质量问题,发送警报信息,确保施工安全。
技术关键词
多模态信息融合
智能检测方法
非线性
数据
深度学习框架
注意力机制
声波
模态特征
跨模态
信号
设备端口
隧道
视频
图像
智能检测系统
动态
空洞
传感器
警报
系统为您推荐了相关专利信息
通信故障检测方法
双模通信模块
信道
相干性
指标
电力巡检机器人
路径优化方法
巡检路径
光伏组件
电能
机器人控制器
电信号
机器人基坐标系
机器人工作空间
指数
拓扑优化方法
残差网络
条件生成对抗网络
生成结构
cGAN网络