摘要
本发明公开了一种基于跨模态知识迁移的毫米波人体网格重建方法。该方法包括:获取数据集,该数据集反映深度图与参数化人体模型参数之间的对应关系,以及基于毫米波数据提取的热力图与参数化人体模型参数之间的对应关系;利用所述数据集对3D人体网格模型进行知识蒸馏训练,其中教师模型以所述深度图作为输入,学习从所述深度图到参数化人体模型参数的映射,学生模型以所述热力图作为输入,学习教师模型的高级特征表示;利用经训练的学生模型对目标进行人体网格重建。本发明提升了模型的泛化能力,降低了对大规模标注数据的依赖,进而降低了成本并加快了部署速度。
技术关键词
人体模型
人体形状参数
网格重建方法
深度图
三维位置信息
教师
学生
网格模型
热力图
人体关节点
顶点
编码器
特征提取器
坐标
跨模态
射线追踪算法
系统为您推荐了相关专利信息
单目深度估计
深度图
定位方法
井下作业环境
实例分割网络
静电保护电路
保护器件
金属硅化物阻挡层
电源钳位电路
二极管
手眼标定方法
人形机器人
特征点
深度相机
生成三维点云
场景模拟方法
遮挡关系
场景模拟装置
深度图
场景模拟系统