基于多模态融合的深井铸造铝液泄漏检测方法

本发明提供一种基于多模态融合的深井铸造铝液泄漏检测方法，涉及有色金属铸造安全监控技术领域，其包括：获取历史数据集；历史数据集包括视觉样本数据、红外样本数据、声学样本数据和标签数据；构建深井铸造过程中的铝液泄漏检测模型；基于历史数据集对铝液泄漏检测模型进行训练，得到训练好的铝液泄漏检测模型；获取深井铸造过程中的视觉数据、红外数据和声学数据；将视觉数据、红外数据和声学数据输入到训练好的铝液泄漏检测模型中，得到铝液泄漏检测结果。本发明能将视觉、红外和声学多模态数据的编码、融合和跨模态交互，让不同模态信息互补，挖掘数据深层关联，实现深井铸造铝液泄漏的精准检测。