一种面向Transformer网络的混合精度乘法器

AITNT
正文
推荐专利
一种面向Transformer网络的混合精度乘法器
申请号:CN202510893659
申请日期:2025-06-30
公开号:CN120803399A
公开日期:2025-10-17
类型:发明专利
摘要
本发明公开了一种面向Transformer网络的混合精度乘法器,应用于FPGA,根据目标Transformer网络当前层的权重数据的权重精度、目标高分辨率图像的特征图数据的特征图精度和预设数据分配规则,确定单个计算周期的第一数量的权重数据和第二数量的特征图数据;根据第一数量的权重数据和第二数量的特征图数据,确定目标重编码算法后对权重数据和特征图数据进行重编码,得到权重编码数据和特征图编码数据;在单个计算周期内对权重编码数据和特征图编码数据进行乘法计算,得到单个计算周期的初始乘积结果;对初始乘积结果进行解码,将目标Transformer网络当前层对应的所有计算周期的多个子特征图数据合并,得到目标特征图数据。本发明在保证模型精度的基础上,提升了资源利用率。
技术关键词
编码算法 数据 乘法器 精度 编码模块 权重特征 解码算法 网络 周期 解码模块 现场可编程门阵列 符号 输出特征 变量 控制模块 图像
系统为您推荐了相关专利信息
1
一种基于网格编码的低空飞行计划冲突检测方法
冲突检测方法 网格 计划 航迹数据 编码
2
一种基于动力环境监控单元的家庭电器管控系统和方法
动力环境监控 云端服务器 家庭 外置传感器 多协议
3
车辆智能调度系统
车辆智能调度系统 快递包裹 数据采集模块 GPS定位模块 数据处理模块
4
一种应用激光测风雷达优化的偏航控制系统及方法
风电机组偏航 激光测风雷达 偏航控制系统 驱动风电机组 移动平均滤波
5
一种基于多目标动态优化与实时反馈机制的智能采购寻源方法及系统
ERP系统数据 子模块 在线学习技术 动态博弈论 智能合约技术
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号