摘要
本发明公开了一种基于时空交互与速率感知的动态手势识别方法。该方法包括时空解耦特征提取、速率特征注入模块、时空特征注入交互模块。所述时空解耦特征提取由三维卷积、Inception模块、多尺度Transformer构成,所述速率特征注入模块基于相似度计算和光流估计算法实现视觉节奏特征提取,使用视觉节奏特征对初始特征进行特征增强,时空特征注入交互模块由空间特征注入模块和时间特征交互模块构成,所述空间特征注入模块和时间特征交互模块基于注意力机制实现。所述时空解耦特征提取为骨干网络,其他模块嵌入骨干网络中,承担特征注入、特征增强等作用。本发明涉及人机交互、动态手势识别算法、深度学习、计算机视觉等领域,具有特征全面、识别准确的优点。
技术关键词
动态手势识别方法
速率
模块
局部细节特征
注意力机制
语义特征
纹理特征提取
输出特征
阴影特征
节奏特征
多尺度特征
多层感知机
估计算法
网络
计算机视觉
运动特征