摘要
基于多模态检索增强生成的教学视频总结思维导图生成系统,包括:视频获取模块、信号分离模块、文本转录模块、帧采样模块、实体提取模块、思维导图节点提取模块、视觉特征提取模块、视觉特征缺失判断模块、缺失帧查找模块、思维导图生成模块;本发明分别在语言可迁移性、节点提取准确性、层级关系准确性、实验指标可靠性方面进行了技术改进与创新,显著提升了“教学视频‑思维导图”方法的可迁移性与生成思维导图的准确性,并使自动化生成思维导图的评价指标更加可靠。
技术关键词
生成系统
视觉特征提取
视频帧集合
多模态
文本
教学
实体
思维导图生成方法
节点
转录方法
光学字符识别方法
采样模块
生成思维导图
序列
音频
关系
系统为您推荐了相关专利信息
知识图谱补全方法
深度神经网络
实体
视觉图像信息
视角
康复锻炼系统
信息管理单元
患者信息管理
康复动作
人体骨骼关键点
质检模型
数据
传感器监测
智能质检方法
多模态传感器
物品定位装置
定位器
定位基站
物品定位管理系统
定位模块