摘要
本发明所提供的一种基于零阶优化的低功耗神经网络参数确定方法及装置,属于神经网络技术领域,所述方法包括:获取神经网络的训练集,所述神经网络部署于数字存内计算芯片上;将所述训练集按批次输入神经网络;计算每轮训练的损失函数,所述损失函数包括精度损失,以及数字存内计算芯片在执行推理任务时的能耗;结合零阶优化方法和模拟退火算法,基于每轮训练的所述损失函数迭代调整神经网络的模型参数,直至满足训练终止条件,得到满足约束条件且最小化损失函数的神经网络参数。本发明通过将神经网络推理时的能耗加入损失函数进行训练,以确定神经网络的参数,可有效降低神经网络在数字存内计算芯片上推理的功耗。
技术关键词
神经网络参数
低功耗
模拟退火算法
能耗
训练集
芯片
神经网络推理
神经网络技术
更新模型参数
可读存储介质
神经网络模型
处理器
程序
精度
输入模块
关系
存储器
计算机
系统为您推荐了相关专利信息
房车安防系统
安全监控模块
监控设备
人工智能技术
能耗
控制分配方法
神经网络结构
神经网络模型
尾舵
力矩
预警模型
故障记录数据
深度信念网络
电能表故障
编码器
数据资产管理方法
数据调度算法
生命周期管理
动态
分类阈值