摘要
本发明涉及卷积神经网络模型优化加速技术领域,公开了一种基于结构化剪枝的卷积神经网络优化方法及系统,包括:滤波器重要性评估:根据信息熵与曼哈顿范数加权求和的方式,计算每个卷积层中滤波器的重要性得分;多粒度滤波器剪枝:根据滤波器重要性评估步骤中计算出的重要性得分,对每层卷积层设定不同的剪枝率,结合全局阈值,采用硬剪枝、软剪枝和条状剪枝的组合策略,实现多粒度的滤波器剪枝;提出了一个操作简单且高效的多粒度滤波器剪枝框架,针对不同层滤波器的敏感度设定剪枝率,结合硬剪枝、软剪枝、条状剪枝,对全局划分三个等级的阈值,达到对应阈值采取相对粒度的剪枝方法最小化剪枝对模型性能带来的影响。
技术关键词
滤波器
多粒度剪枝
神经网络优化系统
卷积神经网络模型优化
信息熵
剪枝方法
计算机存储介质
处理器
网络结构
计算机设备
模块
存储器
策略
元素
框架
基础
参数
尺寸
系统为您推荐了相关专利信息
信号接收模块
可信时间戳
卫星导航系统
光纤
Kalman滤波器
模型降阶方法
变流器
滤波器电容
电压
状态空间模型
接触网系统
RBF神经网络
仿真模型
受电弓上框架
控制器
磁场通信方法
双通道带通滤波器
三轴磁场线圈
平衡光电探测器
同位素