基于语义增强和知识蒸馏的关系抽取模型构建方法及系统

AITNT
正文
推荐专利
基于语义增强和知识蒸馏的关系抽取模型构建方法及系统
申请号:CN202411532138
申请日期:2024-10-30
公开号:CN119441390A
公开日期:2025-02-14
类型:发明专利
摘要
本发明提出了基于语义增强和知识蒸馏的关系抽取模型构建方法及系统,涉及关系抽取技术领域,针对的问题是:现有技术在处理持续学习时,模型往往难以在学习新关系时保持对旧关系的记忆,导致遗忘;过度依赖少量数据易导致模型过拟合,从而无法有效泛化到新的关系。该方法:获取训练样本和典型样本的关系原型,对其进行语义增强,得到扩张后的增强数据集和增强内存集,基于学生模型和多教师模型,进行特征提取、关系分类预测及关系抽取。本发明通过语义增强技术,有效缓解小样本数据稀缺带来的过拟合问题,通过多教师知识蒸馏方法,降低在持续学习过程中因新关系学习而导致的旧关系遗忘,提高模型在面对不同关系时的分类准确性和泛化能力性。
技术关键词
关系抽取模型 教师 学生 输出特征 样本 典型 内存 记忆 原型 关系抽取技术 知识蒸馏方法 语义实体 计算机装置 特征提取模块 数据获取模块
系统为您推荐了相关专利信息
1
一种变电站故障预警方法、装置、电子设备及存储介质
巡检设备 故障巡检 变电站故障 三维场景模型 预警方法
2
基于人工智能的中药废弃资源饲料配方优化方法及其应用
蒙特卡洛树搜索 中药 资源 ReLU函数 上限置信区间算法
3
一种基于在线难例挖掘的端到端散射体轮廓建模方法
边缘检测网络 顶点 样本 线框模型 建模方法
4
基于遗传算法的Mal-POBM恶意代码对抗样本生成方法
样本生成方法 遗传算法 静态特征 恶意代码检测系统 布局
5
海冰区域的船舶导航方法、装置、设备及存储介质
船舶导航方法 规划 轮廓信息 单源最短路径 空间金字塔
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号