摘要
本发明公开了一种基于实时开放词汇检测的变电站违章检测方法,包括:采集变电站现场作业图像,结合作业规范文档提取待检测的违章描述提示语句,将违章描述提示语句编码为提示语句向量;将现场作业图像输入经改进YOLO架构的特征提取网络,获得多尺度的图像语义特征;针对检测任务,将违章描述提示语句的语义向量进行解耦式文本适应处理,得到增强语义向量;将多尺度语义特征和增强语义向量融合对齐得到多模态特征,通过多模态特征进行开放类别的违章行为的识别和定位;将相似和重复的违章描述提示语句进行嵌入式缓存,并部署在边缘设备上进行实时违章行为检测。
技术关键词
违章检测方法
语义向量
语句
语义特征
采集变电站
融合特征
交叉注意力机制
多模态特征
标签
图文
特征提取网络
融合图像特征
矩阵
变电站作业现场
策略动态管理
编码
对象