摘要
本申请实施例提供了一种基于视频的手术技能评估方法和装置、设备、介质,涉及人工智能技术领域。该方法包括:对手术视频的每个视频帧进行目标检测,得到多个初始检测框和出血量;利用基于图卷积网络的空间交互模块,对初始检测框进行检测框调整,得到目标检测框;对多个视频帧中的目标检测框进行跟踪,得到初始组织对象跟踪轨迹和初始器械对象跟踪轨迹;利用基于图卷积网络的时序交互模块,分别对初始组织对象跟踪轨迹和初始器械对象跟踪轨迹进行调整,得到目标组织对象跟踪轨迹和目标器械对象跟踪轨迹;根据多个视频帧的所述出血量、目标组织对象跟踪轨迹和目标器械对象跟踪轨迹进行手术技能评估。本申请提高了手术技能评估的规范性和准确性。
技术关键词
对象跟踪
节点特征
轨迹
器械
技能评估方法
组织
视频帧
手术
标识
网络
时序
人工智能技术
模块
电子设备
处理器
可读存储介质
系统为您推荐了相关专利信息
手术机器人系统
显示设备
位置状态信息
系统级
生成优化建议
构建无人机
深度学习模型
关系建模
深度卷积神经网络
无人机群体
无人机
轨迹设计方法
协作式
概率密度函数
表达式
机器人智能磨抛
磨抛加工过程
实时监测数据
线性回归模型
收集机器人