摘要
本申请提供一种模型训练方法、风险行为识别方法、系统、设备及介质,所述训练方法包括:获取训练数据集;所述训练数据集包括图像数据和文本数据;基于所述训练数据集利用多阶段蒸馏训练策略对风险行为识别模型进行训练,获取训练后的风险行为识别模型;所述多阶段蒸馏训练策略包括对所述风险行为识别模型的语义表示、注意力分布和/或风险标签阶段进行蒸馏训练。本申请利用多阶段蒸馏训练策略对风险行为识别模型进行训练,使得小模型在多任务表现接近大型模型水平的同时,显著减少了内存和算力消耗,解决了现有技术中用于识别风险行为的传统视角语言模型参数量大、难以边缘部署的问题。
技术关键词
文本
图像
数据
多阶段
注意力
识别方法
语义
蒸馏
空间结构信息
标签
模型训练方法
列表
策略
识别系统
特征提取单元
识别模块
多任务
图文
识别风险
系统为您推荐了相关专利信息
重识别方法
相机
交互注意力
行人重识别数据
通道
果蝇优化算法
光伏发电数据
异常识别方法
多层感知机
DBSCAN算法
FPGA算法
电容电路
控制电路
控制模块
图像传感器
数据校准方法
数据拟合模型
信息处理模块
气体
心肺复苏技术
注意力机制
卷积神经网络结构
检测头
森林火灾检测方法
特征提取网络