一种多源异构大语言模型融合方法及系统

AITNT
正文
推荐专利
一种多源异构大语言模型融合方法及系统
申请号:CN202411583317
申请日期:2024-11-07
公开号:CN119646731A
公开日期:2025-03-18
类型:发明专利
摘要
本发明公开了一种多源异构大语言模型融合方法及系统,所述方法包括:通过预训练的K个来源大型语言模型获得一组概率分布矩阵;利用预设的对齐策略对所述一组概率分布矩阵进行对齐,得到对齐的一组概率分布矩阵;将所述对齐的一组概率分布矩阵进行融合,得到融合的概率分布矩阵;将预设的目标大型语言模型根据所述融合的概率分布矩阵以预设的融合目标进行持续训练,得到最终模型。本发明实现了高质量的大语言模型融合。
技术关键词
大语言模型 矩阵 融合方法 异构 融合系统 对齐模块 策略 标记 文本 处理器 标签 计算机设备 序列 编辑 可读存储介质 表达式 词语 指标
系统为您推荐了相关专利信息
1
图像色彩增强方法、装置、设备以及存储介质
三维查找表 感知特征 语义特征 图像 色彩
2
一种基于NR架构的PDCCH信道优化处理系统
无线信道状态信息 信道估计优化 波束权值 PDCCH资源 信道特征参数
3
高海况环境下分布式无人艇集群协同感知与控制一体化方法及系统
控制一体化方法 无人艇集群 分布式通信网络 高海况 模型预测控制算法
4
一种试卷识别方法、装置、设备、介质及产品
试卷图像 定位框 号角 试卷识别方法 特征点
5
一种动态分片分区的CPU-GPU异构模型计算方法
模型计算方法 分区 异构 决策树模型 分片
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号