摘要
本发明公开了一种基于神经辐射场的三维视线重定向的方法,包括以下步骤:S1、搜集并处理数据集,将数据集中的图像进行人脸模型处理;S2、进行特征编码与多层感知机MLP进行约束学习;S3、通过步骤S1中得到的图像和三维人脸参数,利用三平面特征提取器EF提取三平面特征T并通过三平面特征T进行体渲染生成低分辨率特征FT;S4、模型总体优化通过执行梯度下降法更新模型整体的权重,迭代训练若干轮次。本发明采用上述的一种基于神经辐射场的三维视线重定向的方法,实现了一种端到端的视线重定向模型训练,在使用单视角图像的情况下,实现了头部姿态和注视方向的显式解耦,达到了同时控制注视方向和头部姿态的效果。
技术关键词
姿态特征
人脸模型
多层感知机
超分辨率
相机外参
梯度下降法
编码器
视角
三维人脸重建
生成高分辨率
身份
标签
特征提取器
图像编码
颜色
数据
密度
系统为您推荐了相关专利信息
网络节点分类方法
邻居
节点特征
矩阵
多层感知机
网络安全风险
新能源场站
网络安全威胁
测评系统
数据分析模块
子模块
交互式输入
特征向量库
修正工具
特征提取单元
卷积神经网络模型
偏最小二乘回归模型
可溶性固形物含量
超分辨率重构
葡萄