摘要
本申请公开了一种基于大模型的数据处理方法及装置,该方法为:基于终端对象上传的待处理数据,获得结构化信息;基于每个表头名称以及对应的表头位置,生成待测数据集;调用大模型,将待测数据集中的表头信息与模版数据集中的标准表头信息进行匹配,以获得匹配结果;根据匹配关系,将各个表头信息对应的数据填充到目标数据表的目标主键内;基于目标数据表中所有主键的填充数据,确定数据偏差指标;当数据偏差指标不符合要求时,向终端对象发送预警通知。该方法利用大模型实现标准表头信息与标准表头信息的匹配,基于大模型所输出的匹配关系,将表头信息所对应的数据填充至目标数据表中,完成待处理数据的有效整理,提高多源数据整合的处理效率。
技术关键词
表头
数据处理方法
对象
终端
关键词
汉语分词系统
指标
代表
偏差
层级
模版
通知
合并单元格
关系
语义
处理器
数据处理装置
程序
存储器
系统为您推荐了相关专利信息
建立通信
队列
计算机执行指令
服务发现协议
处理器
数据分类模型
测试数据处理方法
节点
聚类
测试数据处理装置
自然语言文本
字幕
端点
识别自然语言
数据处理方法