基于神经网络硬件的量化方法、系统、设备及存储介质

AITNT
正文
推荐专利
基于神经网络硬件的量化方法、系统、设备及存储介质
申请号:CN202510319853
申请日期:2025-03-18
公开号:CN120218139A
公开日期:2025-06-27
类型:发明专利
摘要
本申请涉及一种基于神经网络硬件的量化方法、系统、设备及存储介质,涉及神经网络领域。其中方法包括:接收数据类型为BF16的初始数据;层归一化初始数据得到数据类型为BF16的activation数据;根据神经网络硬件设计矩阵乘法器;根据矩阵乘法器处理并计算activation数据得到第一数据;反量化第一数据得到反量化activation数据;输出反量化activation数据。本申请的技术效果是:保持大模型的性能的同时提高大模型运算速度。
技术关键词
矩阵乘法器 神经网络硬件 反量化模块 数据输出模块 数据接收模块 量化系统 数据处理模块 处理器 计算机设备 可读存储介质 存储器 速度
系统为您推荐了相关专利信息
1
一种基于多核异构芯片危险驾驶预警、制动系统及方法
危险驾驶预警 红外摄像仪 智能穿戴设备 制动系统 异构
2
基于存算一体化的电力负荷资源管理用智能终端
异常数据 智能终端 马尔科夫链模型 历史运行数据 分布式能源系统
3
一种基于边缘计算的烟丝生产在线监测方法及系统
数据处理模型 计量设备 在线监测方法 烟丝生产线 在线监测系统
4
一种基于特征空间对齐的多模态数据增强方法及系统
投影特征 多模态 序列 生成特征 模式
5
电视手机音频补偿器
音频补偿器 电视手机 音频输出模块 芯片 协议
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号