摘要
本发明涉及人工智能技术领域,提供一种语言模型优化方法、装置、程序产品、电子设备和介质。获取利用原始训练数据集对预训练语言模型进行优化训练后,得到的初始语言模型;利用测试数据集对初始语言模型进行能力分析,确定初始语言模型的损坏能力;在原始训练数据集包含的全部训练数据组中,获取与损坏能力对应的训练数据组得到待处理训练数据组;对待处理训练数据组进行优化得到优化后的训练数据组,并基于优化后的训练数据组对原始训练数据集进行更新,得到更新后的训练数据集;利用更新后的训练数据集对预训练语言模型进行优化训练,得到目标语言模型。从而提高了训练数据的质量,提升了语言模型的优化效果及其在特定任务上的性能。
技术关键词
语言模型优化方法
数据
标签
预训练语言模型
计算机程序产品
优化装置
电子设备
人工智能技术
处理器
分析模块
存储器
机制
介质
系统为您推荐了相关专利信息
抗疲劳结构
无人机机身
数字孪生模型
智能传感器网络
处理单元
健康数据采集终端
服务端
数据存储系统
加密数据
数据访问请求
节水型建筑给排水系统
分流水阀
冲厕储水箱
神经网络模型
雨水收集模块