基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法

AITNT
正文
推荐专利
基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法
申请号:CN202510009909
申请日期:2025-01-03
公开号:CN119399415B
公开日期:2025-03-18
类型:发明专利
摘要
本发明公开了基于高斯泼溅与3DMM模型的单目视频人脸重建与驱动方法,包括如下步骤:S1、基于3DMM模型将人脸RGB视频的每一帧转化为显式表示的人脸网格;S2、构建几何增强模块,采用改进的迭代最近点算法对眼睛和牙齿区域进行几何对齐;S3、初始化3D高斯球,根据人脸网格在不同表情下的点变化驱动3D高斯球的动态变化;S4、基于不同面部区域的特性,分配自适应优化的学习策略系数;S5、为每个3D高斯球增加置信度信息,通过渲染生成置信度图像并与渲染图像相乘,与输入图像计算高维特征相似性,优化3D高斯球的属性参数和渲染效果。本发明结合高斯泼溅与3DMM模型,实现了单目视频人脸高精度重建与驱动。
技术关键词
人脸网格 关键点 驱动方法 面部 图像 感知损失函数 球谐系数 透明度 视频 相机外参 语义 眼睛 矩阵 误差 定义 动态更新 标签
系统为您推荐了相关专利信息
1
基于空间对齐与特征耦合的矿井提升机钢丝绳缺陷检测方法
矿井提升机钢丝绳 缺陷检测方法 耦合特征 检测网络模型 融合注意力机制
2
急性心肌梗死患者心脏康复系统、方法、装置及存储介质
心肌梗死患者 运动处方 康复系统 骨骼关键点 动作监控
3
一种低空无人飞行图传平台
数据传输模块 像素点 平台 代表 编码原理
4
一种基于惯性动捕信息知识蒸馏的视觉动捕方法
热力图 特征提取网络 相机 人体关节点坐标 图像
5
显示装置和测试该显示装置的方法
驱动器集成电路 平面图 驱动芯片 焊盘 测试显示装置
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号