摘要
本公开提供了一种异常行为检测方法、装置及电子设备,涉及行为检测技术领域,其中方法包括:获取监控数据集,监控数据集包括使用非固定摄像头采集的监控数据;利用预训练目标检测小模型从监控数据集中检测出目标特征,并将含有目标特征的监控数据标记为目标图像,目标特征包括人员、车辆和船只中的任意一种或多种;利用预训练多模态大模型从目标图像中识别出关键视觉特征,并将关键视觉特征转换为文本数据;利用预训练大语言模型将文本数据与预设场景知识库进行对比,判断文本数据是否为异常行为数据,确定是否触发告警。本公开能够全面地提取关键视觉特征,提高了关键视觉特征的识别率,可以准确地检测出异常行为。
技术关键词
大语言模型
视觉特征
多模态
文本
时空关联关系
场景
铁丝网
图像
电子设备
多源异构数据
计算机
船只
融合多源
可读存储介质
声音传感器
振动传感器
处理器通信
标记
系统为您推荐了相关专利信息
螺旋桨故障诊断
动态门控
声学特征
视觉特征
注意力
神经调控方法
血红蛋白
神经调控系统
动态
静息态
知识图谱数据库
大语言模型
语句
实体
非暂态计算机可读存储介质