摘要
本发明公开一种面向分布外场景图像识别的稳健模型压缩方法,一方面使用训练数据微调模型参数,继承分布内样本表征能力,另一方面结合避免过拟合方法,使用稀疏优化筛选参数保证对分布外样本的泛化能力,技术易实现、通用性较强。主要步骤包括:预剪枝阶段在特征处理部分和最终分类层前加入Dropout,并引入L1正则项调整原模型结构,增强稀疏性的同时避免后续剪枝造成过拟合;剪枝阶段屏蔽Dropout层,使用泰勒展开式评估所有参数在置零前后对模型损失的影响大小作为重要性指标;基于评估结果和压缩比,去掉重要程度最低的参数;最后通过微调恢复模型性能。评估参数和微调同时进行,不断根据当前参数做出评估,以适应参数调整带来的重要性变化。
技术关键词
图像识别模型
模型压缩方法
参数
微调单元
场景
计算机设备
可读存储介质
指标
重构单元
数据
展开式
处理器
阶段
存储器
样本
线性
基础
关系
系统为您推荐了相关专利信息
吊杆
悬索桥施工
智能优化方法
成桥阶段
粒子群优化算法
好氧颗粒污泥系统
性能预测模型
支持向量回归方法
指标
正态分布函数
参数热网络模型
温度估计方法
双卡尔曼滤波器
损耗
状态空间模型
地质力学参数
孔隙水压力分布
尾矿库
网格模型
应力场
恒压控制方法
等效电路模型
接收线圈
仿真模型
接收端