摘要
本公开提供了一种用于模型训练的方法、主机和存储设备。所述方法包括:由主机设备指示图形处理器GPU将所述模型的当前层的第一中间数据从存储设备的动态随机存取存储器DRAM加载到所述GPU的内存中,其中,所述当前层是正在执行计算的所述模型的层;以及基于所述DRAM的空间容量,由所述主机设备通知所述存储设备将所述模型的待计算的层的第二中间数据从所述存储设备的NAND预取到所述存储设备的DRAM中,其中,所述当前层的第一中间数据由所述GPU在所述模型的反向传播中使用以执行针对所述当前层的计算。
技术关键词
存储设备
训练神经网络模型
执行数据预取
图形处理器
主机设备
内存
通知
存储服务器
数据中心系统
应用服务器
固态硬盘
存储系统
可读存储介质
总量
协议
存储器
系统为您推荐了相关专利信息
数字证书
存储方法
签名证书
文件下载请求
SM3算法
便携式数据
保险盒
资产
移动数据安全技术
RAID1镜像
模型更新方法
分块
中央处理器
图形处理器
流水线