一种基于图像生成的动态视频与三维模型的融合方法

本发明公开了一种基于图像生成的动态视频与三维模型的融合方法，涉及图像生成技术领域，本发明，引入NeRF三维几何感知生成网络，直接处理三维几何数据，使每一帧生成的图像包含场景的几何信息，避免物体形变、扭曲或位置错误，NeRF的三维感知能力使物体的形状与位置始终与场景中的实际几何结构匹配，实现在生成过程中对几何结构的动态理解，同时嵌入时间序列的几何信息，时间序列中引入物体的动态位置和旋转矩阵，能够有效捕捉和更新场景中物体的几何状态，动态调整光线路径使物体的运动轨迹与场景中的变化完全一致，有效应对大范围的运动和复杂旋转，增强了几何捕捉能力，提升了视频生成的精度。