基于惯性测量单元的人机交互方法

本发明公开了一种基于惯性测量单元的人机交互方法、设备及计算机可读存储介质，该方法包括：获取惯性测量单元的原始三维运动数据生成标准运动特征流；根据当前活动应用程序的屏幕截图形成屏幕按键布局信息；基于屏幕按键布局信息生成包含功能注释的有效虚拟按键集合；从标准运动特征流中提取候选手势片段以得到初步基元序列；分析初步基元序列判定当前的主控制模式及当前生效的交互子模式；根据当前的主控制模式及当前生效的交互子模式，生成包含鼠标光标移动指令、鼠标按键指令、键盘按键指令及虚拟按键操作指令中至少一者的控制指令集合。本发明具有提升基于IMU的鼠标控制在多场景下的操作效率和用户体验的优点。