摘要
本发明涉及机器人视觉交互技术领域,具体涉及一种腹腔镜手术机器人视觉交互系统及方法,包括:双目摄像头,装载在腹腔镜前端,用于拍摄记录术中手术机器人的操作影像;图像处理单元,用于在所述手术机器人的操作影像中提取出手术机器人的运动信息,并通过术前规划的运动轨迹与手术机器人的运动信息确定手术机器人的操作状态;轨迹更新单元,用于依据手术机器人的操作状态,确定手术机器人的术中规划轨迹,并反馈至显示面板;显示面板,用于向操作者显示手术机器人的术中规划轨迹。本发明实现为操作者提供视觉临场感,并通过术前规划的运动轨迹和手术机器人的操作影像确定手术机器人的操作状态,可实现对机器人操作状态进行异常感知和异常处理。
技术关键词
腹腔镜手术机器人
双目图像深度估计
视觉交互系统
轨迹
规划
三维模型
视觉交互方法
图像处理单元
分支卷积神经网络
运动
双目摄像头
影像
计算机执行指令
组织
坐标
视觉临场感
系统为您推荐了相关专利信息
卫星姿态控制方法
立体成像
控制力矩陀螺群
指令力矩
模型预测控制器
告警设备
动态路径规划
采集设备
数据中心运维管理
多模态
管控方法
粒子
机载传感器
跟踪控制算法
监控无人机
热电厂设备
设备健康状态评估
管理方法
传感器采集设备
数据融合算法