摘要
本发明涉及人工智能技术领域,提供一种模型加速方法、装置及设备,该方法包括:获取Transformer模型当前产生的图像处理任务,将图像处理任务对应的非线性函数分解成计算图;计算图中的节点表示非线性函数中的图像处理计算操作,边表示图像处理计算操作之间的数据流;基于计算图,对算术处理核心MPC多核阵列中的MPC进行配置,并基于多个配置后的MPC分布式执行图像处理任务;在得到图像处理任务的中间结果时,将图像处理任务的中间结果写入环形缓冲区进行下一轮计算;在得到图像处理任务的计算结果时,将图像处理任务的计算结果存储至相应的内存块。本发明确保连续流式处理无中断,避免内存碎片化,提高计算效率和资源利用率。
技术关键词
模型加速方法
环形缓冲区
地址生成单元
非线性
内存
旁路
参数
阵列
数据
执行图像处理
缓冲器
管道
核心
指数
人工智能技术
加速装置
控制器
处理器
系统为您推荐了相关专利信息
支持向量机模型
电网投资规模预测
蝙蝠算法
拉格朗日乘子法
二氧化碳排放量
协同控制方法
风电机组
电力系统频率
单机等值模型
电场
动态管理方法
网元设备
智能模型
动态管理系统
核心
风险
动态权重优化
智能判定方法
核心算法
修正算法