摘要
本发明属于计算机视觉中的三维重建技术领域,公开一种基于多尺度时空图卷积网络的足部接触检测方法及系统,该方法包括:采集视频数据并将每段动作序列转成图像序列;对图像序列进行处理,并截取以目标检测帧为中心的输入序列;生成基于时间尺度的子序列;对每个时间尺度的子序列进行处理,提取出高维时空特征图特征;通过空间注意力机制加权聚合关节特征,并将时空特征图转换为全局表示;实现跨时间尺度的信息交换和互补,对时空特征进行融合;输出四维接触概率向量,经阈值判断后生成二值化接触标签,得到足部接触状态。本发明在快速运动和缓慢运动场景下均能够实现准确的单视角足部接触检测,并应用于运动捕捉优化、步态分析等多种场景。
技术关键词
接触检测方法
深度网络模型
姿态估计
多尺度
关节特征
序列
生成二值化
关键点
注意力机制
多层感知器
坐标
接触检测系统
Sigmoid函数
图像
三维重建技术
滑动窗口
人体关节点
平滑技术