摘要
本发明涉及一种腹腔镜手术视频检索与可视化方法及系统,该方法通过"视频分析‑数据组织‑多模式检索"实现高效的手术视频检索。在视频分析阶段,采用深度学习模型结合医学知识约束的隐马尔可夫模型,自动解析视频内容并划分标准化过程单元,降低计算资源消耗和训练时间。数据组织阶段,提出特征实体双向映射,将非结构化视频数据转化为具有医学语义的层次化数据结构,便于存储和检索。多模式检索阶段,设计时间轴导向、器械导向、过程单元导向三种检索模式,结合多轨道展示和医学语义可视化编码实现动态可视化。通过多模式检索方法和时序特征动态可视化的交互反馈,为医学人员提供了符合其培训、研究需求的专业化检索体验。
技术关键词
腹腔镜手术
马尔可夫模型
可视化方法
动态可视化
深度学习模型
视频分析
多轨道
时序特征
医学
语义
多模式
实体
编码
手术器械
转移概率矩阵