摘要
本申请涉及一种端云协同的视频异常告警方法及系统,其中,该方法包括:获取视频流;通过端侧设备的第一模型生成端侧检测元数据;当触发预置规则时执行智能事件封装生成事件数据;经由边侧设备根据风险等级将事件数据弹性管道上传至对应云端服务器;通过云端服务器的第二模型生成与端侧元数据匹配的文本描述信息;其中第一模型和第二模型基于联合对抗训练生成,确保恶劣环境下语义一致性;根据端侧检测元数据和文本描述信息生成多模态信息;通过对多模态信息进行关键目标处理输出告警信息。通过本申请,解决了传统视频监控中端云模型判断矛盾、协作割裂导致描述混乱的问题,提高了异常识别准确率,推动安防决策向精准化、智能化转型。
技术关键词
多模态信息
告警方法
云端服务器
视频流
端云协同
信息处理
生成事件
语义向量
数据
知识图谱推理
文本
标识
生成知识图谱
输出告警信息
生成关键词
接收端
风险
系统为您推荐了相关专利信息
图文
文本
图像特征提取模型
多模态特征融合
编码
主控模块电路
检测手环
电容
滑动变阻器
蓝牙通信模块
高尔夫教学
陪伴系统
智能感知终端
双摄像头系统
移动终端
多模态信息融合
工件抛光设备
智能控制模组
毛刷筒
管件
海上风电塔筒
智能感知系统
信号分析模块
变压器
信号采集模块