基于三维运动手势的虚拟按键交互方法

本发明公开了一种基于三维运动手势的虚拟按键交互方法、装置、设备及计算机可读存储介质，该方法包括：对从惯性测量单元采集的原始三维运动数据进行多级信号处理得到标准化运动特征流；对标准化运动特征流进行动态分割和手势意图识别处理得到手势识别结果；对当前应用程序的屏幕显示内容进行视觉感知和分析得到屏幕按键布局信息；对屏幕按键信息进行上下文关联和功能解析处理得到有效虚拟按键集合；对手势识别结果与有效虚拟按键集合进行基于上下文感知的映射和有效性确认得到目标虚拟按键及关联的激活指令；对目标虚拟按键和激活指令进行事件生成和执行处理。本发明的方法具有动态感知屏幕内容、智能理解按键功能、上下文感知映射等优点。