小样本动作识别方法、电子设备及介质

本申请公开了小样本动作识别方法、电子设备及介质，方法包括：获取支持集视频、查询集视频以及类别标签模板；通过预设的多模态训练模型对支持集视频、查询集视频以及类别标签模板进行特征处理，得到第一视觉特征向量、类级别语义特征以及第二视觉特征向量；将上述三个数据输入代理语义扩散模块进行噪声扩散处理；对代理语义扩散模块输出的第一实例级代理语义、类级别语义特征以及第一视觉特征向量进行特征表示以构建类别原型，并对第二实例级代理语义进行特征融合，得到查询特征表示；对查询特征表示以及类别原型进行动作识别，以确定查询集视频中第二动作视频帧的动作种类。本发明实施例能够捕捉实例级别的语义细节，提高动作识别精度。