基于特征提取和任务分割的腹腔镜手术全粒度识别系统及方法

本发明属于医学信息处理技术领域，涉及基于特征提取和任务分割的腹腔镜手术全粒度识别系统及方法。首先内窥镜多帧图像组成的视频流输入到该系统中，然后通过多帧空间特征提取模块得到每帧图像的空间特征；所有帧的空间特征随后输入到多帧时间特征融合模块中得到融合不同时间长度的时间特征，然后再用于输出手术阶段、手术步骤、手术三元体标签；同时，从所有帧的空间特征中只提取当前帧的空间特征通过单帧特征还原模块输出手术场景分割标签。本发明的基于特征提取和任务分割的腹腔镜手术全粒度识别系统及方法，可以大幅减少计算资源，并利用多个任务的相互协调作用，与现有单一粒度的手术场景技术相比，可以一次性输出多个粒度的手术场景信息。