一种ViT模型的硬件加速方法、装置、设备及存储介质

AITNT
正文
推荐专利
一种ViT模型的硬件加速方法、装置、设备及存储介质
申请号:CN202410977182
申请日期:2024-07-19
公开号:CN118862986A
公开日期:2024-10-29
类型:发明专利
摘要
本发明公开了一种ViT模型的硬件加速方法、装置、设备及存储介质,设计计算机视觉技术领域,包括:利用批量归一化层及预设目标函数分别对初始ViT模型中的线性层与非线性层进行调整,得到调整后ViT模型;预设目标函数包括线性整流函数和以2为底的目标归一化函数;基于预设数据集及预设模型训练规则对调整后ViT模型进行模型训练,得到目标ViT模型;分别为目标ViT模型的线性层和非线性层设计加速电路,得到加速电路设计结果;基于加速电路设计结果进行全流水架构硬件加速器的构建,并利用得到的目标全流水硬件加速器对目标ViT模型进行加速。能够在兼顾考虑线性层与非线性层的改变的条件下,减小ViT模型规模,实现硬件加速。
技术关键词
硬件加速方法 硬件加速器 非线性 流水 表达式 硬件加速装置 硬件加速模块 计算机视觉技术 批量 指数 模型训练模块 可读存储介质 存储计算机程序 数据 逻辑分析 线性单元 传播算法 电路 顶点
系统为您推荐了相关专利信息
1
基于改进灰狼算法和DBN-ELM的进化深度学习模型的空气质量指数预测方法
灰狼优化算法 灰狼算法 深度学习模型 空气质量指数 策略
2
一种基于非线性动力学的轧机振动纹在线监测系统
非线性动力学 在线监测系统 递归定量分析 动态阈值调节 振动传感器
3
用于节理岩体锚注加固的自应力锚杆破坏演化模拟方法
节理岩体 锚杆 岩体模型 失稳规律 应力
4
一种基于多保真度分布式高斯过程的智能电机控制方法
智能电机控制方法 模型预测值 硬件加速技术 线性化方法 电机智能控制
5
基于ECNN的高速铁路路基累积变形预测方法
高速铁路路基 变形预测方法 机器学习模型 稳定型 表达式
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号