一种面向人机交互的手部动作识别方法

一种面向人机交互的手部动作识别方法，首先充分挖掘视频帧序列的视觉特征，通过帧间运动注意力机制动态提取帧间的运动信息及帧的外观特征；接着利用帧内静态注意力和帧间动态注意力相结合的方式增强时序特征；最后使用CTC束搜索解码方法预测视频对应机器指令，将机器指令传送给机器人，机器人根据指令进行相关动作。本发明考虑了手部动作识别中帧间运动信息和帧的外观特征，充分利用手部动作视频的时序信息，提高了面向人机交互的手部动作识别的适用性和准确性。