摘要
本发明公开了一种行为识别大模型生成方法、行为识别方法、装置、设备及介质。该方法包括:获取多个多模态训练样本,每一多模态训练样本包括多模态行为数据和标注行为标签;基于多个多模态训练样本中的多模态行为数据和标注行为标签,对预训练多模态大模型中的预训练权重进行微调,生成微调行为识别大模型;基于多个多模态训练样本中的多模态行为数据和标注行为标签,对微调行为识别大模型进行优化训练,生成优化行为识别大模型;对优化行为识别大模型进行量化处理,生成目标行为识别大模型。该方法生成的目标行为识别大模型具有较强的场景泛化能力,且对多模态的数据中人员行为的识别具有较高的稳定性和精准性,该方法还能够降低模型存储成本。
技术关键词
多模态
模型生成方法
数据
标签
识别方法
矩阵
模型生成装置
处理器
可读存储介质
模型更新
策略
计算机设备
模块
存储器
聚类
场景
系统为您推荐了相关专利信息
多维特征数据
训练预测模型
构建预测模型
计算机可执行指令
因子
发动机转速
燃油
故障诊断方法
发动机传感器
参数
注意力机制
图像去噪模型
图像去噪方法
电力
特征提取模块
移动基站系统
数据融合方法
协方差矩阵
卫星接收天线
滤波器