一种基于手掌界面的混合现实窗口管理交互方法及系统

本发明公开了一种基于手掌界面的混合现实窗口管理交互方法及系统，包括：采集用户的非惯用手和惯用手对操作面板的不同接触方式，对比不同的接触方式，获取最优的手掌与操作面板的交互方式；基于虚拟手部与操作面板的接触状态，识别出手势动作；对交互目标进行选择，并根据所识别的桌面手势，完成混合现实桌面手势交互。本发明将2D界面转化为三维混合现实的空间，能够提高用户的参与度，并且能够提升交互速度，并且不干涉其他手势交互技术，满足需要频繁交互、长期交互的混合现实场景需求。