一种大模型的部署性能增强方法和装置

AITNT
正文
推荐专利
一种大模型的部署性能增强方法和装置
申请号:CN202510341060
申请日期:2025-03-21
公开号:CN120317362A
公开日期:2025-07-15
类型:发明专利
摘要
本发明提供了一种大模型的部署性能增强方法,可以应用于人工智能技术领域。该方法包括:通过融合随机和认知不确定性动态调整解码采样限制,基于动态调整结果对大模型的生成内容进行准确性和多样性平衡;将生成不确定性作为监督信号,通过检索内容的实时评估和生成内容的有序检索对大模型的检索策略进行动态调整;通过融合认知不确定性和随机不确定性构建全局风险函数,利用全局风险函数对大模型在思维链中的每个推理步骤进行细粒度评估;对大模型的每个智能体的输出不确定性进行量化,对输出不确定性量化结果进行动态加权融合,基于动态加权融合结果对大模型的输出进行选择。本发明还提供了一种大模型的部署性能增强装置、电子设备和存储介质。
技术关键词
检索策略 风险 动态解码 人工智能技术 实体 电子设备 处理器 输出模块 可读存储介质 信号 指令 松弛 存储器 计算机 机制
系统为您推荐了相关专利信息
1
一种基于机器学习的软件供应链安全分析方法及系统
依赖关系分析 分析系统 数据存储模块 软件 漏洞数据库
2
一种加强电力监控系统网络边界安全策略的方法
电力监控系统 网络边界 网络安全设备 全生命周期管理 网络安全策略
3
一种土壤环境重金属污染综合评价方法
综合评价方法 评估指标体系 模拟模型 重金属污染检测 重金属污染程度
4
基于知识图谱和多神经网络的POI地址类型识别方法
识别方法 地理位置特征 融合知识图谱 节点 文本
5
一种基于声学地层数据融合解译的海域活动断裂分析方法
断裂分析方法 地震 断裂特征 相位变化特征 融合策略
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号