摘要
本发明公开了一种融合生理数据的脸部建模方法,包括以下步骤:构建人脸3D模型;获取输入的人脸图像,对所述人脸图像进行处理,获得UV反照率图;建立面部反照率和血液之间的联系,将UV反照率图分解为UV血图;获取rPPG信号,采用rPPG信号与UV血图进行时间调制,获得PPG UV血图序列;将所述人脸3D模型和PPG UV血图序列融合构建模拟人脸,以将生理属性赋能到人脸3D模型上。本发明通过使用rPPG信号对UV血图赋能,能够有效的将脸部3D模型与生理数据相融合,使得脸部模型能够观测出相应的生理变化。本发明可广泛应用于虚拟现实、生成式人工智能、生物医学领域。
技术关键词
脸部建模方法
相机模型
人脸网格模型
生理
图像
卷积编码器
阴影模型
黑色素
生物物理参数
反射率
面部
血红蛋白
数据
血液
曲面法线
皮肤模型
球谐函数
法线贴图