摘要
本发明公开了基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法,包括如下步骤:S1、基于3DMM模型将人脸RGB视频的每一帧转化为显式表示的人脸网格;S2、构建几何增强模块,采用改进的迭代最近点算法对眼睛和牙齿区域进行几何对齐;S3、初始化3D高斯球,根据人脸网格在不同表情下的点变化驱动3D高斯球的动态变化;S4、基于不同面部区域的特性,分配自适应优化的学习策略系数;S5、为每个3D高斯球增加置信度信息,通过渲染生成置信度图像并与渲染图像相乘,与输入图像计算高维特征相似性,优化3D高斯球的属性参数和渲染效果。本发明结合高斯泼溅与3DMM模型,实现了单目视频人脸高精度重建与驱动。
技术关键词
人脸网格
关键点
驱动方法
面部
图像
感知损失函数
球谐系数
透明度
视频
相机外参
语义
眼睛
矩阵
误差
定义
动态更新
标签
系统为您推荐了相关专利信息
矿井提升机钢丝绳
缺陷检测方法
耦合特征
检测网络模型
融合注意力机制
心肌梗死患者
运动处方
康复系统
骨骼关键点
动作监控
驱动器集成电路
平面图
驱动芯片
焊盘
测试显示装置