摘要
本发明属于运动模式识别技术领域,并公开了一种结合多模态特征的人体运动模式识别方法、系统、设备及介质,包括:获取人体各部位的多模态运动传感数据,所述多模态运动传感数据包括加速度计传感数据、陀螺仪传感数据、磁力计传感数据与气压计传感数据;对所述多模态运动传感数据进行时间同步处理,并提取所述多模态运动传感数据的多模态时空特征;将所述多模态时空特征输入集成在云端的人体运动模式识别模型中进行分类预测,得到运动模式识别结果;其中,所述人体运动模式识别模型是基于CNN‑Transformer网络构建的。本发明所述技术方案显著提升了动作识别的识别精度。
技术关键词
人体运动模式识别
多模态特征
时间同步
磁力计
气压计
陀螺仪
云端
线性插值法
移动通信网络
存储计算机程序
数据采集模块
低通滤波器
传感器
电子设备
系统为您推荐了相关专利信息
检测模型训练方法
内核
模块
融合多模态信息
3D点云数据
车辆信息获取方法
时间同步
视觉传感器
多传感器信息融合
激光雷达
需求预测方法
需求预测模型
门控循环单元网络
动态数据集
空间特征提取