模型量化方法、装置、电子设备、存储介质和程序产品

AITNT
正文
推荐专利
模型量化方法、装置、电子设备、存储介质和程序产品
申请号:CN202510915033
申请日期:2025-07-02
公开号:CN120706481A
公开日期:2025-09-26
类型:发明专利
摘要
本公开实施例公开了一种模型量化方法、装置、电子设备、存储介质和程序产品,通过获取目标模型中的待量化数据;对待量化数据的协方差矩阵进行特征分解,得到特征向量矩阵;基于特征向量矩阵构建方差均衡旋转矩阵;基于方差均衡旋转矩阵,对待量化数据进行方差均衡变换;基于方差均衡变换之后的待量化数据,对目标模型进行量化处理,以将量化后的目标模型部署至硬件设备,量化后的目标模型可被硬件设备调用进行相应任务的处理,由此,基于特征分解对待量化数据进行主成分分析,可实现通道间方差的精准对齐,使待量化数据的通道间方差趋于一致,使得量化数据的数值分布更加均匀,从而实现更高的量化精度,进而提升硬件设备的执行效率。
技术关键词
硬件设备 计算机程序指令 计算机程序产品 协方差矩阵 大语言模型 电子设备 数据处理单元 存储计算机程序 成分分析 处理器 模块 可读存储介质 指数 存储器 线性 参数 通道
系统为您推荐了相关专利信息
1
一种后量子密码快速实现方法及相关产品
多项式 分区 读取存储单元 私钥 加密通讯技术
2
一种预算管控方法、装置、电子设备及介质
控制策略 预算管控方法 数据 人机交互界面 时间段
3
目标提示词信息确定方法、设备及存储介质
评价算法 数据 数值 处理器 计算机程序产品
4
一种基于混沌映射佳点集初始化和模拟退火的雪消融优化算法的频谱预测方法、程序、设备及存储介质
频谱预测方法 算法 特征提取单元 局部空间特征 位置更新
5
用于确定用于最大化充电能量的充电配置文件的方法和设备
数据处理装置执行 车辆电池 机器可读存储介质 模拟电池 执行优化方法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号