一种基于语言辅助训练图卷积的行为识别方法

本发明所述的一种基于语言辅助训练图卷积的行为识别网络方法首先通过将骨架编码器输出的特征分为四个部分，并与文本编码器生成的部分文本特征进行对比学习，得到的对比损失用来指导整体网络的训练，可以在模型参数量较少的情况下有效提高识别准确性。此外，在骨架模型输入时加入角度特征这一高阶特征表示，以帮助模型进行相似动作的分类。最后，设计多特征的骨架编码器，将关节、骨骼和角度等特征分别进行信息提取，之后进行特征融合，经过三个图卷积块后送入全连接层进行分类。