摘要
本发明公开了一种基于可学习阈值的异常值感知低精度训练硬件系统,属于神经网络训练领域,旨在解决在边缘计算设备上进行深度神经网络训练时,如何在保证量化精度的同时有效处理异常值的问题。其包括通过在线更新异常值的阈值提高模型量化性能,具体包括以下步骤:配置异常值阈值实时监测和识别输入的计算数据中的异常值,并根据识别结果对计算数据进行感知量化;对感知量化后的计算数据进行数据转换,并进行数据编码,根据数据编码结果确定计算场景;基于计算场景分配计算任务至处理单元簇中;通过梯度下降算法计算异常值梯度,并进行可学习的异常值阈值更新;在网络训练完成后,进行性能评估,并将结果进行整理和输出。
技术关键词
处理单元
硬件系统
数据编码
精度
梯度下降算法
深度神经网络训练
元素
标记
场景
译码信息
序列
列表
在线
阵列
格式
线性
系统为您推荐了相关专利信息
分析检测仪
生化传感器
信号采集单元
多通道
接口
起重机平衡梁
超声波测距传感器
融合算法
倾角仪
显示设备
恒流模块
恒流源电路
主控模块
光源控制器
晶体管
栅格
数字表面模型
监测点
径向基函数插值算法
粗糙度
心电信号分类方法
心电信号分类装置
双向神经网络
融合特征
信号特征化