摘要
本申请公开了数字人动作识别方法、设备、介质及产品,涉及数字人技术领域,通过在训练数字人动作识别模型时根据数字人动作样本的动作帧的姿态数据进行编码并结合动作查询向量进行多层解码计算,获取最后输出的第一预测动作并计算其与标注动作的第一匹配关系,再根据该第一匹配关系计算多个解码层的输出结果相较于标注动作的损失值,根据各损失值计算模型损失值以更新数字人动作识别模型的参数,弥补了相关技术中缺少数字人动作识别方案的问题,且使模型的多个解码层的输出都直接参与到损失计算中,确保模型在每个层次上都能对数字人动作识别做出贡献,利用保留部分输出层的数字人动作模型执行动作识别任务,在保证识别准确性的同时提高识别效率。
技术关键词
动作特征
动作识别模型
动作识别方法
序列特征
解码
上采样
样本
关系
注意力
编码
尺寸
可读存储介质
存储计算机程序
数据
精度
计算机程序产品
参数
处理器
系统为您推荐了相关专利信息
脑电信号分类方法
脑电信号分类系统
斯皮尔曼相关系数
癫痫脑电信号特征
投票算法
可见光视频
级联编码器
伐木机械
无人机
视频帧特征
人体动作识别方法
注意力
多模态
模态特征
融合特征
卷积模块
多层特征融合
输入端
残差归一化
补全方法