摘要
本发明提供一种非结构化文件并行同步方法及系统,涉及文件同步技术领域,包括利用预训练文件分块模型对目标文件进行智能分块,并生成双层级联索引编号和数据哈希值。然后,根据数据传输优先级模型,通过自适应并行传输通道将数据子块传输至目标端数据库,并进行异步验证。最后,利用预训练文件重组模型,基于双层级联索引编号和数据块关联图谱对数据子块进行重组,生成同步目标文件,并将确认信息提交至区块链网络。本发明能够提高非结构化文件同步效率、保障数据完整性和安全性,并降低网络传输压力和存储成本。
技术关键词
数据传输优先级
分块
节点
级联
索引
同步状态信息
密度分布特征
动态规划模型
序列
数据验证
网络
边界特征
数据分布特征
两阶段提交协议
数据存储
语义关联度
层次结构特征
语义特征
文本内容特征