摘要
本发明公开了一种基于动态语义引导掩码的时空解耦人体行为识别方法、装置和设备,包括:从原始视频中提取人体骨骼序列数据并进行数据增强;基于动态语义引导掩码机制在空间与时间两个维度上对数据增强后的骨骼序列进行掩码操作;将掩码操作后的骨骼序列数据分别送入查询编码器和动量编码器,分别获得空间表示和时间表示,构建跨域对比损失,进行对比学习训练获得人体行为识别模型;将待识别视频输入至人体行为识别模型,获得对待识别视频中人体行为的预测结果。本发明的基于动态语义引导掩码的时空解耦人体行为识别方法、装置和设备在无需人工标签的情况下显著提高人体行为识别精度与环境适应性。
技术关键词
识别方法
注意力
语义
序列
动态
特征提取单元
关节点
人体骨骼
时序特征
视频
矩阵
输出特征
编码器参数
机制
数据处理模块
策略更新
系统为您推荐了相关专利信息
电穿孔技术
生物传感器技术
调节剂
脂肪酸
机器学习模型
智能故障检测
信号特征
非线性特征
预处理集成电路
非线性动力学特性
车辆运动状态参数
动态响应模型
方向盘转角数据
力矩传感器
补偿器
铁皮石斛病虫害
铁皮石斛组
特征提取模型
分类方法
样本