一种基于多模态信息的猪只分割方法

本申请提供一种基于多模态信息的猪只分割方法，涉及图像分割和识别领域。解决了现有技术在手持设备或边缘计算设备上运行模型，因算力受限而导致推理速度较慢，难以满足实时性要求的问题。该方法包括：获取待识别区域的RGBD图像和热力图像，对RGBD图像和热力图像采集设备进行标定，并基于标定结果对两类图像进行对齐处理。基于对齐后的RGBD图像、热力图像，构建五通道图像数据，将五通道图像数据输入至轻量化结构的语义分割网络进行特征提取与融合，得到猪只图像的分割掩码图像。基于标定过程中获取的内参和外参，将分割掩码图像反向投影至第一RGBD图像，得到分割后的猪只图像。本申请用于猪只分割过程中。