基于分布式并行计算AUC的模型变量筛选方法及装置

AITNT
正文
推荐专利
基于分布式并行计算AUC的模型变量筛选方法及装置
申请号:CN202510649291
申请日期:2025-05-20
公开号:CN120804901A
公开日期:2025-10-17
类型:发明专利
摘要
本申请涉及一种基于分布式并行计算AUC的模型变量筛选方法、装置、电子设备、计算机可读介质及计算机程序产品。该方法包括:确定待进行筛选的模型变量;将所述模型变量对应的样本集划分为多个样本子集;将所述多个样本子集分发到Spark分布式系统的多个节点中进行并行分箱计算得到局部AUC;将多个节点的局部AUC汇总到Spark分布式系统的中心节点进行加和处理,生成模型变量对应的全局AUC;通过所述全局AUC确定模型变量对正负标签的判别能力,从而进行模型变量的筛选。本申请采用分布式计算降低了单一数据源或中心存储敏感数据的依赖性,既能够满足高效的数据分析需求,又能够降低数据泄露的安全隐患。
技术关键词
分布式系统 分布式并行计算 变量筛选方法 样本 分箱 节点 计算机程序产品 梯度提升模型 变量模块 标签 处理器 分发模块 随机森林 筛选装置 电子设备 存储装置
系统为您推荐了相关专利信息
1
一种近红外快速检测注射用哌拉西林钠他唑巴坦钠中两种成分含量的方法
成分含量 光谱预处理方法 测定方法 注射用无菌粉末 定量分析模型
2
目标检测模型训练、目标检测方法、装置、设备及介质
预测类别 样本 检测模型训练方法 生成对抗网络 图像
3
一种基于CatBoost模型的氯离子扩散系数预测方法
氯离子扩散系数 直观展示模型 样本 网格搜索方法 特征选择方法
4
基于人工智能的医学影像报告自动化生成方法及装置
报告 自动化生成方法 三维坐标信息 参数 跨模态
5
一种基于机器视觉的保护膜外观缺陷检测方法及系统
外观缺陷检测方法 保护膜 神经网络模型 外观缺陷检测系统 结构光
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号