摘要
本发明涉及模型优化技术领域,并具体公开了基于云边协同大模型的安全行为检测算法,包括:基于边端检测模型检测出原始图像中关于安全行为检测的一次检测信息;将检测出的每个目标安全行为边界框的文本描述信息和在原始图像中的局部图像特征进行多模态特征融合;基于云端检测模型对所有目标安全行为边界框的融合特征进行检测获得所有目标安全行为边界框的二次检测信息并结合新生成的详细自然语言标注信息获得云端标注数据;基于最新获得的云端标注数据对边端检测模型进行增量训练直至基于当前的云边协同大模型获得的所有测试图像的检测结果满足预设条件时,基于当前的云边协同大模型对待检图像进行检测;基于云边协同实现了安全行为高精度检测。
技术关键词
局部图像特征
多模态特征融合
布局
融合特征
大语言模型
矩阵
轻量化设计结构
算法
模型优化技术
云端
自然语言
模型剪枝
置信度阈值
网络
注意力机制
文本
编码
关系
数据
系统为您推荐了相关专利信息
视觉特征
多模态特征融合
计算机程序指令
文本特征向量
图像块
融合特征
注意力解码
语音识别网络
滤波器
文本识别
激光雷达数据
激光雷达图像
分类方法
分类网络
空谱特征