摘要
本发明公开一种数据库数据源并行读取与谓词下推的方法及装置,其中,该方法包括:针对数据库表,指定用于分组的字段、所需的分组数量以及并行度阈值;将JDBC数据源的SQL语句拆分为多个分组执行,确保同时执行的分组数量不超过设定的并行度阈值;使用jsqlParser组件来解析表的过滤条件,并动态注入到分组的过滤条件中;针对不同类型的数据库,使用对应的分组表达式模板,允许用户自定义分组规则。该方法及装置大幅提升了访问JDBC数据源的效率,有助于加速大数据分析应用的性能。
技术关键词
表达式
语句
字段
模板
可读存储介质
处理器
计算机设备
动态
概念
存储器
控制模块
标记
算法
系统为您推荐了相关专利信息
农业采摘机器人
像素点
神经网络模型
激光接收阵列
智能采摘方法
资源特征
资源推送方法
自然语言解析
图片
分类资源
盾构机盾尾
压力监测方法
压力传感器
生成压力
索引表
轴承故障诊断方法
提水设备
轴承温度监测
轴承状态监测
油液检测仪
中转设备
节点
逻辑回归算法
网络探测技术
表达式