数据处理方法、电子设备及存储介质

AITNT
正文
推荐专利
数据处理方法、电子设备及存储介质
申请号:CN202511114104
申请日期:2025-08-08
公开号:CN120874894A
公开日期:2025-10-31
类型:发明专利
摘要
本发明涉及人工智能技术领域,提供一种数据处理方法、电子设备及存储介质,其中方法包括:在首次获取到目标数据训练集中任一样本数据的索引的情况下,从磁盘读取上述样本数据,对上述样本数据进行第一数据预处理和第二数据预处理,获得经过数据预处理后的上述样本数据用于目标人工智能模型的训练,以及,在系统内存中创建上述样本数据对应的共享内存块,将上述样本数据对应的中间数据和基础信息存储至上述样本数据对应的共享内存块中,以供在非首次获取到上述样本数据的索引的情况下,直接从上述样本数据对应的共享内存块中获取上述样本数据对应的中间数据和基础信息。本发明能在人工智能模型训练过程中降低磁盘的数据输入输出压力以及计算开销。
技术关键词
数据处理方法 索引 样本 人工智能模型训练 非暂态计算机可读存储介质 标识 内存 基础 电子设备 处理器 磁盘 人工智能技术 计算机程序产品 数据存储 关系 存储器 压力
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号