一种深度学习模型计算图拆分方法及编译系统

AITNT
正文
推荐专利
一种深度学习模型计算图拆分方法及编译系统
申请号:CN202410950770
申请日期:2024-07-16
公开号:CN118963996A
公开日期:2024-11-15
类型:发明专利
摘要
本发明提供一种深度学习模型计算图拆分方法及编译系统,涉及计算机科学技术领域。该方法首先通过获取深度学习模型计算图,采用遗传算法设计性能评估器,获得深度学习模型计算图各个分支在不同核上的推理性能,自适应的将深度学习模型计算图各个分支映射到最佳核,并划分为子图。然后通过编译系统,将子图编译成序列化文件,实现了多分支在多核上的部署。该发明提出的深度学习模型计算图划分方法及编译系统充分评估了子图在多核加速器上的实际推理能力并能支持多样的深度模型架构,从而显著提高推理性能,使得边缘智能应用获得更快的响应速度和更高的处理效率,解决了可扩展性差的问题。
技术关键词
深度学习模型 节点 加速器 拆分方法 分支 遗传算法设计 编译系统 拆分系统 动态链接库 计算机科学技术 广度优先搜索 深度优先搜索 标记 插件 有向无环图 操作系统 队列 数据 划分方法 字典
系统为您推荐了相关专利信息
1
基于BIM的装配整体式钢结构的三维点云分割方法和系统
三维点云分割方法 三维点云数据 钢结构 融合特征 交叉注意力机制
2
一种文本驱动的图像自动化生成方法及系统
自动化生成方法 语义图谱 视觉 自动化生成系统 自然语言文本
3
防碰撞方法、装置、电子设备、存储介质及产品
飞行物体 无人机 路径规划算法 防碰撞方法 坐标
4
一种河流禁渔效果评估方法
指标 规划算法 指数 数据 节点
5
一种基于区块链的工业互联网内数据可信共享方法
共享方法 工业互联网平台 企业 跨链系统 区块链系统
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号