一种基于文本描述的背景替换及视频重打光方法

本发明公开了一种基于文本描述的背景替换及视频重打光方法，包括获取3D渲染视频；获取待处理的原始真实视频的法线视频，以获取各视频帧的像素点集合；随机选取像素点集合中的模拟点光源，随机选取模拟点光源所对应的颜色并将其重新应用到各视频帧中，以获取模拟重打光视频；通过3D渲染视频与模拟重打光视频对构建的视频获取模型进行训练，获取最优视频生成模型；以实现基于文本描述的背景替换及视频重打光的视频获取过程。解决了现有基于图像重打光模型构建的方法，不能很好的利用视频帧之间连续的时序关联关系，不能有效实现对视频帧时序关联的建模效果；此外，该领域缺乏高质量的视频重打光数据集，严重限制了模型的重打光能力的问题。