一种适用于AI芯片的量化调优装置及方法

AITNT
正文
推荐专利
一种适用于AI芯片的量化调优装置及方法
申请号:CN202410954897
申请日期:2024-07-16
公开号:CN118917365A
公开日期:2024-11-08
类型:发明专利
摘要
本发明实施例公开了一种适用于AI芯片的量化调优装置及方法,所述方法包括:按约束条件将模型拆分成多个子图;其中,所述模型为深度学习浮点模型,所述约束条件为AI芯片在量化过程中所面临的限制;采用组合方式,组合了众多调优设定,以得到对应的调优策略;依次对每个子图结合所述调优策略进行调优处理并进行效果判断;若判断结果为优于调优前且已为最后一个子图时,结束量化调优并更新对应的量化参数;其效果是:本发明能够在保持模型精度的前提下,实现更好的模型压缩和加速效果。
技术关键词
调优方法 芯片 策略 参数 模型压缩 指标 模块 定义 校准 精度
系统为您推荐了相关专利信息
1
一种电厂热控仪表的安装方法
电厂热控 热控仪表 设备控制单元 远程监控单元 记忆模型
2
一种内存模组自动断电压力测试方法及系统
内存模组 断电保护功能 测试接口 最小化误差 压力测试方法
3
一种板卡测试方法、系统、设备及可读存储介质
示波器 测试设备 板卡测试方法 波形 信号
4
一种风机能效分析与优化方法、装置、电子设备及介质
能效 风机运行参数 深度学习模型 设备状态参数 数据
5
一种云平台运维方法、装置、设备、介质及产品
自然语言 云平台运维方法 生成执行计划 意图识别 执行器
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号