摘要
本发明公开了一种基于特征融合的手势识别方法、装置、设备及介质。该方法包括:获取目标车辆对应的标准化视频,并区域剪裁处理标准化视频,生成包含手部区域的目标视频;基于空间注意力模型对目标视频进行空间特征提取,生成目标视频对应的姿态特征,并基于时间注意力模型对目标视频进行时间特征提取,生成目标视频对应的结合光流信息的运动特征;特征融合处理姿态特征以及运动特征,生成目标视频对应的目标融合特征;基于全连接分类网络确定目标融合特征对应的手势类别,作为目标视频对应的目标手势识别信息。通过本发明的技术方案,能够准确且实时地识别动态手势,提高了手势识别的准确性及鲁棒性。
技术关键词
空间注意力模型
视频帧
姿态特征
空间特征提取
运动特征
手势识别方法
融合特征
分类网络
实时视频
权重特征
识别动态手势
特征提取模块
压缩特征
手势识别装置
手势识别模块
联动规则
处理器