一种领域知识驱动的多模态电力巡检方法、装置和系统

本申请公开了一种领域知识驱动的多模态电力巡检方法、装置和系统，本申请属于输变电线路检测技术领域，方法包括：利用部署在边端的轻量级目标检测网络对待测目标的图像数据集进行初步检测和分类，过滤掉无缺陷样本，并将包含位置信息和类别信息的缺陷样本传输至云端；对缺陷样本进行分类，并将缺陷样本数据标注为后续缺陷检测所需的数据格式；判断是否为小目标缺陷；如果是则根据大语言模型及多模态大模型进行小目标缺陷检测，否则采用预训练的YOLOv8模型进行缺陷检测。本申请采用大小模型结合的方式，并采用多模态大模型实现小目标缺陷检测，可以显著提升检测效率和准确性。