摘要
本申请提供一种人体运动姿态跟踪方法及相关设备,方法包括,多个热成像红外传感装置感测手肘关节的热成图像序列,多个惯性测量单元感测非手肘关节的初始运动信息向量序列;控制装置将热成图像序列转换为手肘关节的红外光流向量序列,及将初始运动信息向量序列转换为非手肘关节的运动信息向量序列;基于第一神经网络模型,预测手肘关节的红外光流向量序列对应的手肘关节的旋转角度向量;拼接手肘关节的旋转角度向量与非手肘关节的运动信息向量序列,得到多模态信息向量序列;基于第二神经网络模型组合,预测多模态信息向量序列对应的非手肘关节的旋转角度向量;根据手肘关节的旋转角度向量和非手肘关节的旋转角度向量确定人体上半身运动姿态。
技术关键词
肘关节
人体运动姿态
红外传感装置
加速度
序列
多模态信息
神经网络模型
短袖
残差网络模型
热成像
跟踪装置
红外光
多层感知机
服装
跟踪方法
连线
腋窝
衣袖
图像