一种用于环视鱼眼图像的多视角联合语义分割方法

本发明涉及图像语义分割技术领域，公开了一种用于环视鱼眼图像的多视角联合语义分割方法，多视角联合分割模型的构建及训练过程，包括：准备训练数据集，将同时刻的多个视角下的鱼眼图像作为一组环视图像，训练数据集包括多组环视图像以及对应的像素级语义标注；建立基于实时语义分割的多视角联合分割模型，包括特征提取模块、畸变细节补充模块、多视角上下文融合模块和解码器模块；基于训练数据集和交叉熵损失对多视角联合分割模型进行训练。本发明首先对联合分割中的高分辨率细节特征进行多视角畸变补全，然后深层进行多视角位置相关上下文的融合，以此利用多视角鱼眼图像间的关联信息，实现对鱼眼图像的高精度语义分割。