将知识从教师神经网络转移到学生神经网络

AITNT
正文
推荐专利
将知识从教师神经网络转移到学生神经网络
申请号:CN202510170068
申请日期:2025-02-17
公开号:CN120494039A
公开日期:2025-08-15
类型:发明专利
摘要
提供将知识从教师神经网络转移到学生神经网络。用于训练学生神经网络(2)以采用给定教师神经网络(1)的行为的方法(100),给定教师神经网络(1)被训练来对输入图像执行给定处理,该方法包括以下步骤:·提供(110)一组训练图像x;·从至少一个训练图像x产生(120)一个或多个风格增强版本x',该一个或多个风格增强版本x'o具有与原始训练图像x相同的语义内容,但是o在其风格上不同于该原始训练图像x;·一方面由教师神经网络(1)并且一方面由学生神经网络(2)处理(130)训练图像x和增强版本x';·使用预定损失函数(3)评估(140)学生神经网络(2)从每个图像x、x'产生的输出(2b)和/或中间工作产品(2a)与教师神经网络(1)从同一图像x、x'产生的输出(1b)和/或中间工作产品(1a)一致的程度;以及·朝改善损失函数(3)的值(3a)的目标,优化(150)表征学生神经网络(2)的行为的参数(2c)。
技术关键词
风格 机器可读数据载体 学生 教师 机器可读指令 质量检查系统 医学成像系统 驾驶辅助系统 语义分割模型 图像分类器 特征提取器 监视系统 文本 基础 计算机 中间层 检测器 机器人
系统为您推荐了相关专利信息
1
一种基于项目反应原理与GRU-Attention的知识追踪方法
知识追踪方法 sigmoid函数 项目 门控循环单元神经网络 学生
2
一种基于行为监测的生猪排泄行为判定方法及系统
控制器模块 判定方法 RFID标签 预警模块 安装监控设备
3
一种基于教室摄像头的自习系统及方法
提醒设备 测试题 显示设备 课桌 人脸识别模块
4
一种基于大语言模型的文档撰写方法、系统和设备
大语言模型 文本 生成文档 浏览器网页 撰写系统
5
一种音频生成方法、装置、设备及存储介质
音频特征 音频生成方法 大语言模型 文本 矢量量化器
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号