摘要
本发明提供一种手势交互方法、系统、可读存储介质及计算机,该方法包括:获取用户针对虚拟标记物的视线聚焦区域;对手部图像输入至卷积神经网络模型中进行卷积运算得到卷积特征图像;基于手部图像的手部编码图像进行像素处理,以得到对应的像素特征图像;将多尺度融合单元导入至多分辨率网络模型中进行模型优化得到网络优化模型;将卷积特征图像和像素特征图像输入至网络优化模型中,以输出用户的手部姿态估计结果,并根据手部姿态估计结果与视线聚焦区域进行碰撞判断,以实现用户的手势交互。本发明利用网络优化模型对卷积特征图像和像素特征图像进行姿态估计,减少网络参数量对手部姿态估计的影响,从而降低手部关节点的检测误差。
技术关键词
手势交互方法
手部姿态估计
卷积神经网络模型
图像
卷积特征
人脸特征点检测
眼部特征点
残差结构
网络优化
多分辨率
像素
手势交互系统
坐标
关节点特征
关节特征
定义特征
编码
系统为您推荐了相关专利信息
表面缺陷检测方法
表面缺陷检测装置
图像提取特征
融合特征
多尺度特征提取
湿法刻蚀设备
X射线检测装置
X射线发射器
升降器
边缘检测单元
裂缝检测方法
注意力机制
混凝土表面裂缝
融合特征
算法
电感器磁芯
自动装配方法
连续图像数据
分布式光纤传感
三维压力场
火焰检测方法
巡检机器人
火焰检测模型
超参数
成像