基于目的视角生成的Diffusion动作预测方法、装置及电子设备

本申请提出一种基于目的视角生成的Diffusion动作预测方法、装置及电子设备，其中，基于目的视角生成的Diffusion动作预测方法包括：获取多个初始视角中各初始视角对应的第一图像；采用多视角生成神经网络模型对各初始视角对应的第一图像进行场景重建，获取三维场景信息；采用多视角生成神经网络模型对三维场景信息进行均匀采样并计算采样点集合中各采样点的多视点图像特征；根据各采样点的多视点图像特征，采用多视角生成神经网络模型生成目的视角对应的第二图像；采用扩散策略Diffusion Policy和第二图像对机器人进行动作预测，确定机器人的具身智能的动作，解决了减少对摄像装置的视角限制，提高机器人动作预测的便利性且可以提高机器人与环境交互的准确性的问题。