大数据量场景下的数据迁移方法及装置

本申请实施例提供一种大数据量场景下的数据迁移方法及装置，方法包括：确定目标数据在分布式搜索引擎中的待迁移索引及其分片设置，根据待迁移索引的大小和分片设置中的热点分布确定对应的迁移任务数据量和迁移任务优先级，并根据迁移任务数据量和迁移任务优先级确定对应的迁移策略；根据迁移策略分批次读取待迁移索引中的目标数据，并将目标数据写入本地文件系统中的迁入目录，将实时迁移速度和实时本地文件系统资源利用率输入设定线性回归模型，根据线性回归模型输出的实时调整参数动态更新每次迁移操作时读取的数据量、每个存储目录的最大文件数以及迁入目录；本申请能够有效提高大数据量场景下的数据迁移效率和准确率。