摘要
本发明公开了一种以行为为中心的第一视角在线动作分割方法,涉及视频动作分析技术领域,使用原型进行以行为为中心的特征增强,实现在未来信息缺失的情况下高效准确的在线动作分割。本发明采用了以行为中心特征增强的方法。该方法包括两个关键部分:一是使用原型学习行为特征,其通过原型来捕捉不同环境下行为的共性,这有助于增强对不同环境下相同行为共享特征的捕捉能力;二是行为特征增强,它既利用当前行为自身的内在特性,又借助原型所捕获的常识来进行特征增强。这种方式减少了对上下文信息的依赖,能够有效克服现有技术中存在的问题。本发明可广泛应用于涉及第一人称视角视频动作分析的场景,如基于可穿戴设备的人体行为监测、增强现实和虚拟现实场景下的人物动作理解等。
技术关键词
动作分割方法
原型
注意力机制
视频
特征提取器
在线
视角
多层感知机
编码器模块
动作分析技术
变换器
解码器
虚拟现实场景
分割系统
可穿戴设备
有效性
代表
聚类
编辑
系统为您推荐了相关专利信息
场景解析方法
输入端
可见光图像
神经网络训练
输出端
稀疏特征
编码策略
深度学习模型
多头注意力机制
局部特征提取
天然气站场
跟踪方法
多特征信息
直方图
摄像头监控系统
图像融合系统
特征提取单元
图像融合方法
多模态卷积神经网络
处理单元
箱式物流系统
展示系统
Unity3D引擎
数字孪生
数据存证