摘要
本发明公开了一种基于眼动追踪的手语关键区域数据集构建方法及系统,包括:通过失聪时间×手语习得年龄×沟通习惯三维分类矩阵划分聋人认知亚组,生成适配不同亚组的多维度手语视频;采集各亚组眼动数据,进行手部、面部等一级物理区域标注,结合亚组特征完成二级认知权重标注;经动态时间规整算法调整动作边界阈值,输出物理标注与认知权重融合的数据集。系统包含认知亚组划分、视频生成、眼动采集、两级标注、数据预处理、动态时间规整及数据集输出模块。本发明解决传统数据集忽视聋人认知差异的问题,提升手语识别模型适应性。
技术关键词
数据集构建方法
手语
动态时间规整算法
手势运动轨迹
眼动数据
视频
物理
数据集构建系统
矩阵
输出模块
面部
坐标
追踪仪
年龄
样本
习惯
系统为您推荐了相关专利信息
磁共振成像数据
阿尔兹海默病
融合特征
VR设备
生理
语音识别模型
声学特征
声学场景
多粒度特征
动态时间规整算法
运动预测信息
地图位置信息
图像特征信息
多尺度特征
运动轨迹信息
多源异构数据
分析系统
同态加密算法
可信计算模块
多模态注意力
三维运动数据
运动特征
交互方法
屏幕显示内容
按键信息