摘要
本发明涉及手术流程评估技术领域,具体涉及基于多源信息的手术多维感知方法、系统及存储介质,包括以下步骤:提取手术全流程周期中多源信息的时间差异性,确定组合多源信息的时间尺度权重;将时间尺度权重加权至多源信息上,得到多源时间组合信息;将多源时间组合信息通过自注意力机制进行空间特征性的提取,得到用于在多源信息中组合提取出用于表征手术状态的多维时空特征;基于多维时空特征构建手术多维感知模型。本发明组合用于感知手术状态的多源信息,并在多源信息中提取出表征手术状态的多维时空特征,保留最有效的时空特征用于建立多维感知模型,从而能够提高多维感知模型对手术状态识别的效率和精准性。
技术关键词
多维感知系统
注意力机制
力觉传感器
计算机执行指令
特征提取单元
特征提取网络
训练分类器
手术机器人
周期
器械
节点处
数据采集单元
可读存储介质
视觉
度量
运动
处理单元