摘要
本发明公开了一种基于声热多模态融合成像的方法、装置及系统,涉及人工智能技术领域,包括:首先利用声像仪采集目标工业设备的超声与热成像数据,分别获取声学及热成像特征,经特征整合处理得到第一声热联合特征以确定声学特征对应的第一模态整合单元,完成跨模态融合获第一特征描述子,同理得第二声热联合特征、第二模态整合单元及第二特征描述子,结合故障类型标签确定故障评估结果,再校准图像数据构建三维声热融合基底图像并标记结果,获得诊断融合图像,实现对目标工业设备的精准诊断。
技术关键词
成像特征
热成像
工业设备
跨模态
超声图像数据
稳态特征
图像特征描述子
耦合特征
特征选择
编码特征
动态权重分配
特征金字塔网络
标签
适配器
多模态协同