模型的鲁棒性验证方法、装置、电子设备及存储介质

AITNT
正文
推荐专利
模型的鲁棒性验证方法、装置、电子设备及存储介质
申请号:CN202411961227
申请日期:2024-12-27
公开号:CN119886345A
公开日期:2025-04-25
类型:发明专利
摘要
本申请公开了一种模型的鲁棒性验证方法、装置、电子设备及存储介质。其中,该方法包括:获取大模型在进行微调训练过程中各个训练批次对应的损失值,并依据损失值,从各个训练批次得到的微调模型中确定待验证模型;获取微调训练过程中所采用的训练数据集,并依据训练数据集中问题文本包含的关键词,生成验证数据集;获取待验证模型依据验证数据集中的问题文本,所生成的回答结果;确定待验证模型生成的回答结果,与验证数据集中与问题文本对应的回答结果之间的相似度,并依据相似度,确定待验证模型的鲁棒性得分。本申请解决了相关技术中的大模型微调验证方案无法充分评估微调模型的鲁棒性的技术问题。
技术关键词
鲁棒性验证方法 文本 数据 非易失性存储介质 关键词 分词 语义主题 样本 统计特征 同义词 电子设备 语句 语法结构 计算机程序产品 验证装置 测试模块 自然语言 处理器 曲线
系统为您推荐了相关专利信息
1
免疫抑制治疗后发生侵袭性真菌感染的预测模型构建方法
预测模型构建方法 评估预测模型 建立预测模型 指标 模型构建系统
2
一种基于智能算法的负面舆情发现方法及系统
舆情发现方法 智能算法 社交媒体平台 BERT模型 数据一致性验证
3
智能融合终端、集中器的自动参数补偿装置
通信单元 智能融合终端 补偿装置 误码率 集中器
4
电力系统数字化成熟度判定方法及系统
电力系统数字化 判定方法 矩阵 多头注意力机制 编码器模块
5
传输网络业务资源关联关系构建方法、装置、设备及存储介质
传输网络业务 资源关联关系 业务关联关系 业务关联信息 对象
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号