一种基于虚拟现实的实时手术远程视频会诊系统及方法

本发明提供一种基于虚拟现实的实时手术远程视频会诊系统及方法，包括：驱动数据采集模块，采集多模态数据；数据处理模块，对来自不同采集源的数据进行融合处理；虚拟形象驱动模块，重建手术现场的虚拟场景，将高清摄像头采集的图像和医疗影像设备采集的内部结构影像进行三维建模和渲染；模板匹配模块，收集和整理常见手术操作的标准动作模板并进行匹配；资料协同模块，与虚拟场景融合进行患者医疗资料展示；5G机器人协助模块，通过5G远程控制机器人执行与虚拟现实场景对应的动作。本发明实现音频与场景融合，提升场景逼真度，增强会诊沉浸感。可实现专家在会诊中与虚拟场景互动，提升会诊效率和参与感，辅助医生规范操作，降低手术风险。