一种面向任务型机器人的高效场景表征方法

本发明涉及一种面向任务型机器人的高效场景表征方法，包括以下步骤：获取机器人捕获的不同视角的RGB图像帧及其深度信息；对每个图像帧进行全景分割获得2D语义信息和2D实例信息，并根据对应的深度信息向三维网格空间投影得到3D语义信息和3D实例信息；基于帧间相机位姿将各个图像帧的3D语义信息和3D实例信息融合到同一个世界坐标系下，进而根据融合后的3D语义信息和3D实例信息采用TSDF方法进行增量式建图，并在建图时基于语义信息和实例信息进行体素的融合更新，得到全景场景点云；基于所述全景场景点云，以其中所有实例为节点，以各个实例间的关系为边，预测获得3D场景图。本发明能够生成高效表征场景的三维语义场景图。