摘要
本申请公开了一种小样本动作识别方法、装置、设备及介质,涉及动作识别技术领域。本申请本申请利用有限的样本建立支持集和查询集,利用支持集中的样本和查询集中的样本进行组合,通过跨样本注意力机制将支持集的类别语义和时序特征信息注入到查询集样本的时序建模过程中,从而增强查询特征的判别能力。使得在利用查询集中的各个样本进行训练的过程中,能够应用到支持集中各个样本的知识,进而提高参与识别的特征量,实现在小样本的情况下的高精度高泛化能力的训练,在应用中,针对待识别视频,依托支持集已学得的类别原型和历史知识,将支持集的语义和时序信息注入到查询视频的帧级特征中,从而增强查询视频对各动作类别的表征,提高识别的精度。
技术关键词
动作识别方法
样本
原型
动作识别模型
视频编码器
动作识别装置
动作识别技术
时序特征
注意力机制
语义
模型训练模块
视频帧
查询特征
掩码矩阵
处理器
系统为您推荐了相关专利信息
联合建模方法
视频帧特征
注意力
视频编辑方法
文本编码器