摘要
本发明提供一种数字人全息互动方法及系统,包括离散化目标三维对象所在的三维包围盒,基于各个体素建立目标生成网格场景;获取三维人体网格数据的多视角相机参数,并得到若干多视角RGB彩色图片;将非刚性变形表示应用在目标生成网格场景上,得到人体模型;将模板人脸网格非刚性注册到人脸表情模型,基于人脸矫正数据构建人脸模型,通过神经辐射场渲染人体模型以及人脸模型;根据运动位置以及运动链模型刻画人体模型的人体运动方式;将情感对话回复模型与人体模型结合。本发明能够构建真实的数字人,并且能够较为真实的与人进行互动。
技术关键词
三维人脸数据
人体模型
互动方法
人脸模型
人脸网格
多视角
人脸表情
长短期记忆神经网络
双向长短期记忆网络
人体骨骼模型
基准
矫正
全息互动系统
颜色
节点
场景
系统为您推荐了相关专利信息
监督学习方法
参数化人体模板
姿态估计
卷积神经网络提取
人体模型