摘要
本发明涉及视频动作检测技术领域,尤其涉及基于子动作单元感知的开集弱监督时序动作检测方法,包括进行嵌入特征提取;预测嵌入特征的片段级别类激活序列;计算交叉熵损失函数;计算基线分支中的总损失函数;构建子动作单元与已知动作类别之间的关系、子动作单元与视频不同时刻片段的时序关系;将每个子动作单元上的激活值作为关系表达进行基于子动作单元的动作语义关系表达和时序关系表达建模,计算基于子动作单元的动作分类损失和DTW损失;计算两个分支一致性损失函数;计算表征损失和平衡损失函数;构建基线分支和子动作单元分支的总损失函数。本发明解决现有方法在检测动作类别为非固定和不同时,存在检测性能有待进一步提升的问题。
技术关键词
时序动作检测方法
分支
嵌入特征
基线
计算机程序代码
关系
动作检测系统
动作检测技术
视频帧
表达式
处理器
语义
分类器
注意力
序列
邻居
指令
模块
系统为您推荐了相关专利信息
局部纹理特征
雷达信号分类方法
融合特征
语义特征
特征提取网络
三维地质模型
天然碱矿
布井方法
水平对接井
水平井施工技术
皮肤病图像
注意力机制
皮肤镜
图像分割网络
空间金字塔池化
混合整数规划模型
LSTM神经网络
调度特征
车调度方法
节点特征