摘要
本发明提供了一种短基线双目三维人体姿态重建方法及系统,包括:采集原始左右图像对,进行人体区域检测;对检测到的人体区域进行人体图像对匹配与尺度变换;基于处理后的左右人体区域图像对得到视差特征,与三维人体姿态估计子网络提取的人体特征进行特征融合,基于特征融合信息得到视差图初始结果,与人体特征建立损失函数进行视差优化,得到优化后的视差图和场景深度图;基于左右人体区域图像对得到人体特征,与视差特征进行特征融合,特征融合结果通过二维姿态估计得到二维人体关节点,基于双目相机参数和三角测量计算方法得到三维人体姿态初始结果,与场景深度图和人体先验监督建立损失函数进行三维人体姿态优化得到优化后的三维人体姿态。
技术关键词
三维人体姿态估计
二维卷积神经网络
场景深度图
图像
人体骨架关节点
人体关键点
人体特征
特征提取模块
像素
双目相机标定参数
坐标
人体骨骼
关键点特征
数据格式
系统为您推荐了相关专利信息
锂电池充电器
累积分布函数
直方图
热成像相机
长短期记忆网络
表面缺陷检测
钢材
通道注意力机制
支路
特征提取能力
智能扫描方法
曲率特征
雷达点云数据
多模态
纹理特征
像素点
智能检测方法
颜色
灰度特征
区域生长算法