摘要
本发明公开了一种多模态的裂纹检测方法、介质及设备,该方法中多模态包括intensity模态和range模态。方法步骤包括:提取强度裂纹特征intensity,同时提取距离裂纹特征range,引入了两组解耦适配器模块去微调SAM2编码器;将强度裂纹特征intensity、距离裂纹特征range以及它们的融合特征一同输入到SAM2解码器中;采用梯度解决冲突方法,以缓解梯度冲突,从而得到三个更新后的梯度。最终,所有更新后的梯度被相加,以生成最终的梯度;使用更新后的梯度对intensity和range距离编码器以及解码器的参数进行更新,最终生成裂纹检测图。
技术关键词
裂纹特征
裂纹检测方法
编码器
解码器
多层卷积神经网络
适配器
冲突方法
强度
参数
注意力机制
融合特征
多模态特征
瓶颈结构
处理器
轮廓特征
双模态
输出特征
系统为您推荐了相关专利信息
图像去模糊方法
神经网络模型
编码器
多尺度
高层次
生成对抗网络
产品生成方法
局部图像特征
服装
文本编码器