一种基于多模态电弧检测网络的受电弓电弧监测方法

本发明公开了一种基于多模态电弧检测网络的受电弓电弧监测方法，属于受电弓电弧监测技术领域，包括以下步骤：基于去噪扩散概率模型DDPM和语义解码器，建立多模态电弧检测网络，并利用未标注的受电弓图像进行自监督训练，得到训练好的多模态电弧检测网络；将实际线路中的受电弓图像，输入至训练好的多模态电弧检测网络，得到电弧预测标签，完成受电弓电弧监测。本发明利用去噪扩散概率模型DDPM提取可见光图像特征和红外光图像特征，能够生成鲁棒且判别性的特征，减少多模态电弧检测网络对标注标签的电弧数据的依赖；利用语义解码器，融合图像的多模态数据，通过电弧特征的视听相关性，减少多模态电弧检测网络对标注标签电弧数据的依赖。