一种基于多模态融合检测的光伏电站无人巡检方法及系统

本发明公开了一种基于多模态融合检测的光伏电站无人巡检方法及系统，涉及光伏电站智能运维技术领域。主要包括如下步骤：(1)采集光伏组件的多模态数据并进行预处理操作；(2)利用预训练的各模态数据标记器将异构数据统一映射为离散标记；(3)利用训练样本对基于Transformer编码器‑解码器架构的多模态融合检测网络进行训练，调整网络参数，得到训练后的模型；(4)根据获取的光伏组件多模态数据或单模态数据，利用训练后的模型输出缺陷类型、位置边界框及严重度评分。本发明解决了传统单模态检测漏检率高、多模态融合低效的问题，针对性的提出了巡检采集模块、数据处理模块、多模态融合检测模块和故障决策模块，实现了从数据采集到智能决策的全流程自动化，显著降低光伏电站运维成本并提升故障响应效率。