从多视图图像中估计人体几何、光照和材质的方法及系统

本发明基于神经辐射场渲染和逆渲染联合优化的思想设计了一种从未知光照下捕获的多视图图像中估计人体几何、光照和材质的方法及系统，主要分为几何预训练阶段和联合优化阶段，首先对人体几何进行预训练以获得良好的初始化结果，然后估计光照和材质并对几何初始化结果进行微调。在估计材质时，本发明使用各向异性材质模型对复杂的人体材质进行建模。在估计光照时，本发明没有使用额外的训练阶段来建模间接光照，而是将间接反射点的出射辐射度视为间接光照，并估计光照可见性以区分直接光照和间接光照。本发明解决了人体复杂材质估计不准确的问题，并能有效从人体多视图图像中解耦几何、光照和材质，提升了人体重光照结果的真实感。