摘要
本申请公开了一种姿态数据的生成方法、图像采集设备及存储介质,涉及姿态检测技术领域,公开了姿态数据的生成方法,包括:获取耳机单元采集的双通道图像,双通道音频以及双通道惯性传感数据;基于所述双通道图像提取异构视觉特征;基于所述双通道音频提取空间听觉注意力掩膜;以及基于所述双通道惯性传感数据确定动作特征;融合所述异构视觉特征,所述空间听觉注意力掩膜以及所述动作特征,得到姿态描述特征;根据所述姿态描述特征,确定检测目标对应的姿态评估指标。通过视觉、听觉及惯性传感数据三模态数据融合处理,从而在不同模态间建立语义对应关系,提供更稳定且上下文感知的行为识别能力,以此提高姿态异常检测的准确率。
技术关键词
生成方法
动作特征
视觉特征
图像采集设备
注意力
掩膜
听觉
数据
传感
异构
音频
姿态检测技术
统计特征
卡尔曼滤波算法
指标
滑动窗口
耳机
处理器
基础
系统为您推荐了相关专利信息
电子显微镜图像
深度特征提取
图像增强方法
高分辨率模型
双线性插值方法
分拣方法
空间金字塔
机械臂
多尺度信息
引入注意力机制
缺陷检测方法
数据检测分析方法
定位设备
样本
协方差矩阵
序列
动态时间规整
数值天气预报数据
订正方法
注意力
多模态特征
语音特征
面部特征
预警方法
预测特征