摘要
本申请公开了一种知识蒸馏方法、装置、设备及存储介质,涉及知识蒸馏技术领域,公开了知识蒸馏方法,包括:对待执行任务对应的任务文本数据进行解析,以构建待执行任务对应的任务执行思维链,待执行任务包括:设备故障诊断任务;对任务文本数据和任务执行思维链进行关键词提取,获得高相关性关键词;基于任务执行知识图谱和高相关性关键词构建知识子网;通过知识子网对学生模型进行知识传递和蒸馏。应用上述技术方案,解决了现有技术中的知识蒸馏方法在表达和传递大模型内部复杂知识时存在困难,导致学生模型无法充分理解和掌握这些知识的技术问题。
技术关键词
关键词
知识蒸馏方法
图谱
设备故障诊断
文本
学生
标签
节点
教师
语义
数据
知识蒸馏技术
蒸馏设备
关系
蒸馏装置
模块
处理器
可读存储介质
存储器
系统为您推荐了相关专利信息
神经网络模型
终端设备
模型获取方法
计算机执行指令
样本
报告自动生成方法
视觉特征
图像编码器
实体提取方法
跨模态
文本
分词
地图服务
数据可视化工具
地理信息技术
文本
数字型
大语言模型
输出提示词
权限管理功能