摘要
本发明公开一种应用于AI平台的数据集挂载方法及系统,用户创建资源组,并将训练任务与数据集进行绑定形成任务数据库;用户发起请求时将资源组的相关信息发送给AI平台系统;AI平台系统在所需资源充足时,发送请求至Master节点并由Master节点根据调度策略规则将资源组分配至对应的Pod上;Master节点读取任务数据库,当训练任务绑定数据集;时指定目录作为挂载点并在容器启动时将挂载点与主机进行映射;根据提交的资源组的资源需求在指定节点上启动容器,通过容器进行对应的训练任务;容器停止或者删除时,挂载点与主机上的目录解除关联。本发明通过数据库与AI平台相结合的方式,实现数据透传的功能。
技术关键词
挂载方法
平台系统
节点
资源组
虚拟文件系统
容器
数据
目录
挂载系统
主机
策略
客户端
集群
服务端