摘要
本申请实施例提供的一种优化SOL任务参数的方法、装置及设备,获取当前数据处理引擎Spark集群的硬件资源信息和当前SQL任务信息;根据硬件资源信息和SQL任务信息确定可选的任务参数组合;基于人工智能AI模型确定在各任务参数组合下执行SQL任务所需的执行时长;基于各任务参数组合对应的执行时长确定最优任务参数组合。通过AI对各任务参数组合的执行时长进行预测并确定最优任务参数组合,提高了任务参数的确定效率,加快了任务上线进度,避免了服务器资源浪费,提高任务执行效率。
技术关键词
硬件资源信息
数据处理引擎
人工智能AI模型
参数
集群
可读存储介质
计算机程序指令
存储计算机程序
电子设备
处理器
笛卡尔
模块
内存
存储器
数值
系统为您推荐了相关专利信息
监测模型建立方法
多元线性回归模型
功率半导体器件
结温
参数
有限元分析模型
钢筋混凝土桥面板
设计分析方法
拉拔
组合结构工程
稀疏神经网络
数据解码
地址生成单元
处理单元
加法器